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内 容 简 介 


本 书 详细 地 阐述 了 软件 测试 领域 的 基本 理论 .基本 技术 及 专门 测试 领域 的 测试 技术 。 首 先 , 从 软件 测试 
的 数学 基础 入 手 , 介 绍 了 和 软件 测试 相关 的 基础 知识 ; 然后 全 面 深 入 地 介绍 了 静态 测试 技术 和 动态 测试 技 
术 ; 在 了 解 这 些 基础 技术 的 基础 上 ,再 从 单元 测试 ,集成 测试 系统 测试 及 验收 测试 4 个 层面 分 析 了 如 何 进行 
测试 的 计划 、 用 例 分 析 和 设计 等 过 程 ; 由 于 面向 对 象 的 测试 技术 是 随 着 面向 对 象 技术 的 发 展 在 原 有 测试 技术 
基础 上 发 展 起 来 的 ,本 书 专列 一 章 重点 介绍 面向 对 象 的 测试 技术 ; 本 书 还 用 较 长 的 篇 幅 阐述 了 专用 应 用 系统 
测试 ,主要 包括 GUI 测试 .Web 系统 测试 数据库 测试 .嵌入 式 系统 测试 ,负载 压力 测试 及 游戏 测试 ; 最 后 , 讨 
论 了 软件 测试 管理 和 软件 测试 自动 化 技术 并 介绍 了 两 个 开源 测试 工具 的 使 用 方法 。 附 录 中 收录 了 正 交 试验 
法 的 部 分 正 交 试 验 表 和 软件 测试 中 英文 术语 对 照 表 。 

本 书 作为 软件 测试 的 理论 ,技术 及 应 用 参考 书 , 不 但 突出 基础 知识 和 方法 ,而 且 阐 述 了 一 些 高 级 的 测试 
技术 和 方法 ,同时 也 注重 测试 技术 的 应 用 。 作 者 在 分 析 知识 点 的 同时 , 均 用 实际 的 案例 进行 深入 浅 出 的 分 
析 ,使 读者 能 更 好 地 理解 和 掌握 软件 测试 理论 知识 ,并 能 很 好 地 运用 到 实际 测试 工作 中 去 。 

本 书 可 以 作为 不 同 层次 高 等 院 校 的 计算 机 、 软 件 工程 等 相关 专业 的 本 科 生 、 研 究 生 的 教学 用 书 ,也 可 作 
为 软件 测试 技术 人 员 的 参考 书 。 
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INTRODUCTION 


随 着 信息 时 代 的 来 临 ,软件 已 被 广泛 应 用 到 工业 、 农 业 、 商 业 、 金 
融 、 科 教 卫 生 、 国 防 、 航 空 等 各 个 领域 ,成 为 国民 经 济 和 社会 信息 化 的 一 
个 基础 性 ,战略 性 产业 。 因 此 ,与 之 相关 联 的 软件 工程 专业 也 越 来 越 受 
到 社会 的 关注 。 

从 国际 范围 来 看 ,1996 年 ,美国 Rochester 技术 大 学 (RIT) 率 先 设 
立 软件 工程 专业 ,其 后 美国 .加 拿 大 .英国 和 澳大利亚 的 许多 大 学 相继 跟 
进 。1998 年 ,ACM 和 IEEE-CS 两 大 计算 机 学 会 联合 设立 软件 工程 教 
育 项 目 (SWEEP) ,研究 软件 工程 课程 设置 。2001 年 ,IEEE 和 ACM 发 
布 CC2001 教程 ,将 计算 (computing) 学 科 划分 为 计算 机 科学 .计算 机 工 
程 、 软 件 工程 .信息 系统 和 信息 技术 五 个 二 级 学 科 。2003 年 6 月 《计算 
机 课程 一 一 软件 工程 》(CCSE) 大 纲 第 一 稿 发 表 , 后 正式 更 名 为 《软件 工 
程 2004 教程 )(SE2004)。 

在 我 国 ,教育 部 十 分 重视 软件 工程 专业 的 发 展 。2001 年 ,教育 部 和 
原 国家 计 委 联 合 下 文 , 成 立 了 35 所 示范 性 软件 学 院 ( 全 部 下 设 于 重点 大 
学 ); 2005 年 5 月 ,教育 部 和 清华 大 学 出 版 社 联合 立项 支持 的 研究 课题 
组 发 布 (中 国 软件 工程 学 科教 程 ); 同年 ,教育 部 组 织 编写 了 《软件 工程 
专业 规范 》; 2006 年 3 月 ,在 教育 部 高 等 学 校 教学 指导 委员 会 成 立 大 会 
上 ,宣布 成 立 软件 工程 专业 教学 指导 分 委员 会 。 截 至 2007 年 初 ,全 国有 
139 所 高 等 院 校 设 立 了 软件 工程 专业 。 显 然 ,软件 工程 已 经 成 为 一 门 迅 
速 兴起 的 独立 学 科 。 

从 我 国 的 国民 经 济 和 社会 发 展 来 看 ,软件 人 才 的 需求 非常 迫切 。 随 
着 国家 信息 化 步伐 的 加 快 和 我 国 高 等 教育 规模 的 扩大 ,软件 人 才 的 培养 
不 仅 在 数量 的 增加 上 也 在 质量 的 提高 上 对 目前 的 软件 工程 专业 教育 提 
出 更 为 迫切 的 要 求 ,社会 需要 软件 工程 专业 的 教学 内 容 的 更 新 周期 越 来 
越 短 , 相 应 地 ,我 国 的 软件 工程 专业 教育 在 不 断 地 发 展 和 改革 ,而 改革 的 
目标 和 重点 在 于 培养 适应 社会 经 济 发 展 需要 的 、 兼 具 研究 能 力 和 工程 能 
力 的 高 质量 专业 软件 人 才 。 

截至 2007 年 ,我 国共 有 72 个 国家 一 级 重点 学 科 , 绝 大 部 分 设置 在 
教育 部 直属 重点 大 学 。 重 点 大 学 的 软件 工程 学 科 水 平 与 科研 氛围 是 培 
养 一 流 软件 人 才 的 基础 ,而 一 流 的 学 科 专 业 教 材 的 建设 已 成 为 目前 重点 
大 学 学 科 建 设 的 重要 组 成 部 分 ,一 批 具有 学 科 方 向 特色 优势 的 软件 工程 
教材 作为 院 校 的 重点 建设 项 目 成 果 得 到 肯定 。 清 华 大 学 出 版 社 一 向 秉 
承 清 华 的 “中 西 兼容 古今 贯通 的 治学 主张 ,自强 不 息 . 厚 德 载 物 的 人 文 
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精神 ,严谨 勤奋 ,求实 创新 的 优良 学 风 ”。 在 教育 部 相关 教学 指导 委员 会 专家 的 指导 和 建议 下 ， 
在 国内 许多 重点 大 学 的 院 系 领导 的 大 力 支持 下 ,清华 大 学 出 版 社 规划 并 出 版 本 系列 教材 ,以 满 
足 软 件 工程 学 科 专业 课程 教学 的 需要 ,配合 全 国 重 点 大 学 的 软件 工程 学 科 建 设 , 旨 在 将 这 些 专 
业 教 育 的 优势 得 以 充分 的 发 扬 ,强调 知识 、 能 力 与 素质 的 系统 体现 ,通过 这 套 教材 达到 “汇聚 学 
科 精 英 、 引 领 学 科 建 设 、 培 育 专业 英才 ”的 目的 。 

本 系列 教材 是 在 软件 工程 专业 学 科 课程 体系 建设 基本 成 熟 的 基础 上 总 结 、 完 善 而 成 ,力求 
充分 体现 科学 性 、 先 进 性 、 工 程 性 。 根 据 几 年 来 软件 工程 学 科 的 发 展 与 专业 教育 水 平 的 稳步 提 
高 ,经 过 认真 的 市 场 调研 并 参考 教育 部 立项 课题 组 的 研究 报告 (中 国 软件 工程 学 科教 程 ), 我 们 
初步 确定 了 系列 教材 的 总 体 框架 ,原则 是 突出 专业 核心 课程 的 教材 ,兼顾 具有 专业 教学 特点 的 
相关 基础 课程 教材 ,探索 具有 发 展 潜力 的 新 的 专业 课程 教材 。 

本 系列 教材 在 规划 过 程 中 体现 了 如 下 一 些 基 本 组 织 原则 和 特点 。 

一 、 体 现 软件 工程 学 科 的 发 展 和 专业 教育 的 改革 ,适应 社会 对 现代 软件 工程 人 才 的 培养 
需求 ,教材 内 容 坚 持 基本 理论 的 扎实 和 清晰 ,反映 基本 理论 和 原理 的 综合 应 用 ,在 其 基础 上 强 
调 工程 实践 环节 ,并 及 时 反映 教学 体系 的 调整 和 教学 内 容 的 更 新 。 

二 、 反 映 教 学 需要 ,促进 教学 发 展 。 教 材 规划 以 新 的 专业 目录 为 依据 。 教 材 要 适应 多 样 
化 的 教学 需要 ,正确 把 握 教学 内 容 和 课程 体系 的 改革 方向 ,在 选择 教材 内 容 和 编写 体系 时 注意 
体现 素质 教育 .创新 能 力 与 实践 能 力 的 培养 ,为 学 生 知识 .能 力 , 素 质 协调 发 展 创造 条 件 。 

三 、 实 施 精品 战略 ,突出 重点 。 规 划 教材 建设 仍然 把 重点 放 在 专业 核心 (基础 ?课程 的 教 
材 建 设 ; 特别 注意 选择 并 安排 了 一 部 分 原来 基础 较 好 的 优秀 教材 或 讲义 修订 再 版 ,逐步 形成 
精品 教材 ; 提倡 并 鼓励 编写 体现 工程 型 和 应 用 型 的 专业 教学 内 容 和 课程 体系 改革 成 果 的 
教材 。 

四 、 支 持 一 纲 多 本 ,合理 配套 。 专 业 核心 课 和 相关 基础 课 的 教材 要 配套 ,同一 门 课 程 可 以 
有 多 本 具有 不 同 内 容 特点 的 教材 。 处 理 好 教材 统一 性 与 多 样 化 ,基本 教材 与 辅助 教材 ,教学 参 
考 书 ,文字 教 材 与 软件 教材 的 关系 ,实现 教材 系列 资源 的 配套 。 

五 、 依 靠 专家 ,择优 落实 。 在 制订 教材 规划 时 依靠 各 课程 专家 在 调查 研究 本 课程 教材 建 
设 现状 的 基础 上 提出 规划 选 题 。 在 落实 主编 人 选 时 ,要 引入 竞争 机 制 , 通 过 申报 .评审 确定 
主编 。 

六 、 严 格 把 关 , 质 量 为 重 。 实 行 主编 责任 制 ,参与 编写 人 员 在 编写 工作 实施 前 经 过 认真 研 
讨 确定 大 纲 和 编写 体例 ,以 保证 本 系列 教材 在 整体 上 的 技术 领先 与 科学 ` 规 范 。 书 稿 完成 后 认 
真实 行 审 稿 程序 ,确保 出 书 质量 。 

繁荣 教材 出 版 事业 提高 教材 质量 的 关键 是 教师 。 建 立 一 支 高 水 平 的 、 以 老 带 新 的 教材 编 
写 队伍 才能 保证 教材 的 编写 质量 ,希望 有 志 于 教材 的 教师 能 够 加 入 到 我 们 的 编写 队伍 中 来 。 


“重点 大 学 软件 工程 规划 系列 教材 "丛书 编 委 会 
联系 人 : 付 弘 宇 fuhy@tup. tsinghua. edu. cn 
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FOREWORD 


前 言 


软件 已 经 应 用 到 人 们 生活 的 各 个 领域 ,是 生活 中 不 可 缺少 的 一 部 
分 。 一 方面 , 随 着 软件 的 普及 ,人 们 对 软件 质量 的 要 求 越 来 越 高 ; 另 一 
方面 ,由 于 软件 系统 变 得 越 来 越 庞 大 而 复杂 ,如 何 提高 软件 质量 是 广 
大 的 技术 人 员 所 关注 的 ,这 使 得 软件 开发 人 员 和 软件 测试 人 员 面 临 着 
巨大 挑战 。 所 以 ,保证 软件 质量 是 软件 工程 领域 一 直 在 深入 研究 的 课 
题 之 一 。 

软件 测试 技术 本 身 是 不 断 发 展 的 。 目 前 ,提高 软件 质量 的 方法 就 是 
在 提高 软件 测试 人 员 技术 水 平 的 同时 规范 并 优化 软件 开发 过 程 的 管理 。 
但 软件 测试 在 国内 仍然 处 于 发 展 的 初期 ,在 测试 标准 、 测 试 计划 的 制定 、 
测试 方法 的 使 用 和 推广 ,测试 的 组 织 和 管理 等 方面 处 于 不 断 发 展 完善 阶 
段 ,处 在 一 个 “百家争鸣 ?的 时 期 。 在 软件 测试 行业 表面 “蒸蒸日上 ?的 现 
象 背 后 ,同时 也 存在 着 软件 质量 危机 。 

基于 这 种 情况 ,国内 许多 高 校 的 计算 机 、 软 件 工程 及 其 相关 专业 纷 
纷 开设 软件 测试 课程 以 培养 更 多 的 软件 测试 人 才 。 目 前 ,市 场 上 的 软件 
测试 教材 良 劳 不 齐 ,精品 教材 少 , 尤 其 对 软件 测试 技术 介绍 全 面 、 深 入 的 
教材 更 少 。 为 了 适应 当前 教学 和 软件 测试 技术 人 员 的 需要 ,编者 查阅 了 
大 量 国 内 外 有 关 软 件 测试 方面 的 著作 和 文献 ,并 结合 自己 多 年 的 从 业 和 
教学 经 验 编写 了 这 本 教材 。 

本 书 的 特点 是 测试 技术 介绍 全 面 , 不 但 阐述 了 所 有 基本 的 软件 测试 
技术 ,而 且 介绍 了 许多 高 级 主题 和 专门 应 用 系统 的 测试 技术 ,并 附 有 许 
多 测试 案例 。 

本 书 共 分 12 章 , 第 1 章 从 讨论 软件 测试 的 数学 基础 人手, 阐述 了 软 
件 测试 的 发 展 史 、 软 件 测试 的 定义 及 基本 原则 等 方面 的 基础 知识 ; 第 
2 章 介 绍 了 静态 测试 技术 ; 第 3 章 全 面 地 分 析 了 动态 测试 技术 ,包括 黑 
盒 测试 技术 和 和 白 盒 测试 技术 等 ; 第 4 一 7 章 分 别 介 绍 了 单元 测试 ,集成 
测试 .系统 测试 及 验收 测试 技术 ; 第 8 章 介绍 了 面向 对 象 测 试 技术 , 讨 
论 了 面向 对 象 测试 的 基本 方法 和 策略 等 ; 第 9 章 阐述 了 GUI 测试 .Web 
系统 测试 数据 库 测 试 、 幅 入 式 系 统 测试 、 负 载 测 试 和 游戏 测试 ,这 些 均 
属于 专门 应 用 系统 的 测试 ; 第 10 章 全 面 分 析 了 软件 测试 管理 的 过 程 ; 
第 11 章 介绍 了 软件 测试 自动 化 ,分 析 了 自动 化 测试 和 手工 测试 的 优点 
与 缺点 等 内 容 ; 第 12 章 介绍 了 两 个 开源 的 测试 工具 Junit 和 Jmeter 的 
使 用 。 

本 书 由 杜 庆 峰 编著 ,在 编写 的 过 程 中 韩 梅 李娜 、 董 笑 、 歼 柳 青 、\ 王 


怡 、. 孙 艺 . 于 丹 等 为 本 书 做 了 案例 的 程序 调试 和 相关 校对 工作 ,在 此 一 并 致谢 。 
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软件 测试 基础 知识 


1.1 软件 测试 的 数学 理论 基础 


正如 软件 开发 过 程 是 一 个 需要 逻辑 思维 的 过 程 一 样 ,软件 测试 也 同 
样 需要 掌握 和 使 用 一 些 数学 理论 和 数学 分 析 方 法 。 数 学 是 一 切 科 学 的 
基础 ,软件 测试 技术 中 运用 的 这 些 数学 知识 将 使 软件 测试 本 身 更 严谨 、 
精确 和 高 效 。 本 节 介 绍 用 于 软件 测试 技术 中 的 数学 基础 知识 。 

从 软件 测试 设计 方法 的 角度 ,软件 测试 一 般 分 为 功能 性 测试 (也 称 
黑 盒 测试 ,Black-Box Testing) 和 结构 性 测试 (也 称 白 盒 测试 , White-Box 
Testing)。 一 般 而 言 , 在 功能 性 测试 领域 中 ,通常 要 用 到 离散 数学 知识 ; 
而 在 结构 性 测试 领域 中 , 则 要 用 到 一 些 有 关 图 论 的 知识 。 


1.1.1 集合 论 


集合 论 是 数学 的 一 个 基本 分 支 学 科 ,研究 对 象 是 一 般 集合 。 集 合 论 
在 数学 中 占有 一 个 独特 的 地 位 , 它 的 基本 概念 已 渗透 到 数学 的 所 有 领 
域 。 这 里 的 集合 是 指 由 一 些 抽象 的 数学 对 象 构成 的 整体 。 集合、 元 素 和 
成 员 关 系 是 数学 中 最 基本 的 概念 。 集 和 论 ( 加 上 逮 辑 和 谓词 演算 ) 是 数 
学 的 公理 化 基础 之 一 ,通过 集合 及 成 员 关 系 来 形式 化 地 表示 其 他 数学 
对 象 。 

例如 ,小 于 10 的 所 有 奇数 ,应 用 集合 论 的 表示 法 可 以 写成 Mi 二 {1， 
3,5,7,9}, 读 作 “M 是 元 素 为 1、3、5、7、9 的 集合 ”; M: 二 {所 有 参加 
2008 年 北京 奥运 会 的 中 国 代 表 团 成 员 } 。 

集合 中 包含 元 素 或 成 员 。 

对 于 集合 必须 注意 以 下 方面 : 

(1) 集合 的 元 素 是 确定 的 ,对 于 集合 , 任 一 个 元 素 要 么 属于 该 集合 ， 
要 么 不 属于 该 集合 ,两 者 必 居 其 一 。 若 一 个 元 素 是 集合 成 员 , 用 E 表 示 ; 
若 不 是 集合 成 员 , 则 用 和 表示。 如 3EM ,9 M,。 

(2) 集合 中 的 每 个 元 素 均 相同 , 即 集合 {1,3,5,7,9) 与 集合 {1,3,5， 
7,9,9} 是 一 样 的 。 

集合 Mi 由 元 素 1,3,5,7,9 组 成 ,可 写成 Mi 二 {11,3,5,7,9), 这 种 


将 集合 的 所 有 元 素 一 一 列 出 的 表示 法 叫做 “ 枚 举 法 ”。 但 有 时 也 可 以 只 列 出 一 部 分 元 素 ,可 以 
通过 决策 规则 推出 其 余 的 部 分 ,如 M 二 {11,3,5,7,9,…} 表 示 奇 数 的 集合 。 列 出 所 有 元 素 的 方 
法 只 适合 少量 元 素 的 集合 或 元 素 符合 某 种 明显 模式 的 集合 。 集 合 还 可 以 有 另外 一 种 方法 表 
示 ,就 是 用 一 个 集合 所 具有 的 共同 性 质 来 描述 这 个 集合 ,如 N= 二 {1: :是 所 有 获得 奖牌 的 中 国 
运动 员 }。 这 种 使 用 决策 规则 的 方法 的 主要 缺点 是 逻辑 上 有 些 复杂 ,尤其 是 当 采 用 谓词 演算 
时 ,而 且 当 决策 规则 用 于 自身 的 时 候 会 出 现 循环 问题 ,如 著名 的 理发 师 问 题 : {为 他 人 理发 而 
不 为 自己 理发 的 人 } ,但 是 测试 人 员 很 少 使 用 自 引用 。 

对 于 集合 元 素 的 个 数 不 作 任何 限制 , 它 可 以 是 有 限 个 或 无 限 个 。 一 个 集合 若是 由 有 限 个 
元 素 组 成 , 则 叫做 有 限 集合 ; 一 个 集合 由 无 限 个 元 素 组 成 , 则 叫做 无 限 集合 。 特 别 情况 下 ,元 
素 个 数 为 0 的 集合 叫做 空 集 。 空 集 在 集合 论 中 有 重要 的 位 置 , 空 集 不 包含 元 素 。 空 集 是 唯一 
的 ,如 8$,{8),{{8)} 都 是 不 同 集合 。 如 果 集 合 基 于 某 种 决策 规则 的 定义 永远 是 不 成 立 的 ,那么 
该 集合 就 是 空 集 , 如 $= 二 {年 : 2012 达 年 三 1812)。 

集合 论 的 运算 主要 表现 在 集合 的 基本 操作 上 : 并 、 交 、 差 和 补 。 其 定义 如 下 : 

。 由 集合 A、B 中 所 有 元 素 合并 组 成 的 集合 叫做 集合 A 与 B 的 并 集 , 记 作 AUB。 

。 由 集合 A、B 中 所 有 的 公共 元 素 组 成 的 集合 叫做 A 与 B 的 交集 , 记 作 AmB。 

。 假设 有 两 个 集合 A、B, 差 集 就 是 属于 A 但 是 不 属于 B 的 元 素 的 集合 , 记 作 A 一 B。 

。 对 于 一 个 集合 A 和 全 集 B 来 说 ,A 的 补 集 是 在 全 集 B 中 所 有 不 属于 A 的 元 素 。 

还 可 以 由 差 集 定义 对 称 差 。 集 合 A、B 的 对 称 差 (或 叫 布尔 和 )A 十 B 可 定义 为 A 十 B= 
(A—B)U(B—A). 

使 用 集合 操作 即 通 过 现 有 和 集合 操作 构建 新 集合 ,通过 定义 的 新 集合 来 确定 新 集合 和 旧 集 
合 之 间 是 如 何 关 联 的 。 给 定 两 个 集合 A、B, 定 义 三 种 基本 集合 关系 ; 

。 A 是 B 的 子 集 , 记 做 ACSB, 当 且 仅 当 a€ A=>a€B。 

。 A 是 B 的 真子 集 , 记 做 ACB, 如 果 AB 且 存在 4b, 使 得 bE B 但 4 A, 则 称 A 是 B 的 真 

子 集 。 

。A 和 B 是 相等 集合 , 记 做 A 二 B, 当 上 且 仅 当 ASB 且 BEA。 

集合 的 划分 是 一 种 非常 特殊 的 情况 ,对 于 测试 人 员 非 常 重要 。“ 划 分 ?的 含义 就 是 将 一 个 
整体 分 成 小 块 ,使 得 符合 某 种 性 质 的 所 有 事物 都 在 某 个 小 块 中 ,不 会 遗漏 。 在 日 常生 活 中 ,将 
一 套房 子 划分 成 不 同 的 独立 房间 、 将 一 个 行政 区 域 划 分 成 不 同 的 独立 县 市 ,将 一 个 外 部 接口 格 
式 划 分 成 不 同 规格 的 独立 含义 的 数据 表示 区 域 等 均 是 划分 的 例子 。 其 定义 如 下 : 

给 定 集合 A, 以 及 A 的 一 组 子 集 Al ,A,,… ,A, ,这 些 子 集 是 A 
的 一 种 划分 , 当 且 仅 当 A1 UA: U…UA,==A, 且 i 关 j 二 Ai 几 
Ai=%。 图 1-1 就 是 集合 与 其 子 集 的 关系 图 。 

集合 的 一 种 划分 形成 了 一 组 子 集 ,因此 常常 把 单个 子 集 看 作 
是 划分 的 元 素 。“ 划 分 ”的 定义 对 于 软件 测试 人 员 非 党 有 用 ,一 方 
面 保证 A 的 所 有 元 素 都 在 某 个 子 集中 , 另 一 方面 保证 任意 一 个 元 1-1 集合 与 子 集 的 例子 
素 都 不 在 两 个 子 集 中 。 例 如 ,对 学 生 集合 的 一 种 划分 ,可 以 包括 小 
学 生 、 中 学 生 、 大 学 生 、 研 究 生 4 个 子 集 元 素 。 

集合 的 “划分 ?对 软件 测试 会 产生 重要 保证 : 完备 性 和 无 元 余 性 。 因 此 “划分 ”的 概念 对 于 
测试 人 员 要 灵活 掌握 。 对 于 功能 性 测试 而 言 ,其 固有 弱点 是 对 所 测试 的 功能 点 可 能 存在 漏洞 
和 宛 余 性 ,如 学 生成 绩 管理 系统 中 教师 更 新 学 生成 绩 这 个 功能 可 能 包括 更 新 成 绩 成 功 ; 学 生 


信息 不 存在 ,更 新 成 绩 失败 ; 学 生 信息 存在 但 成 绩 不 存在 ,更 新 成 绩 失 败 三 个 功能 点 。 而 另 一 
方面 ,一 些 功能 可 能 被 重复 测试 ,所 以 ,如 何 对 被 测试 软件 进行 功能 的 合理 "划分 ?很 重要 。 再 
例如 ,对 于 银行 系统 的 测试 ,可 以 把 银行 系统 的 账户 看 成 一 个 集合 ,而 不 同 的 账户 类 型 可 以 看 
成 该 集合 的 不 同 子 集 , 对 不 同 账户 的 子 集 的 划分 是 对 不 同 账户 进行 功能 性 测试 的 完备 性 和 无 
元 余 性 的 体现 。 


1.1.2 函数 


函数 表示 每 个 输入 值 对 应 唯一 输出 值 的 一 种 对 应 关系 。 函 数 f 中 对 应 输入 值 z 的 输出 
值 的 标准 符号 为 /(z)。 包 含 某 个 函数 所 有 输入 值 的 集合 被 称 作 这 个 函数 的 定义 域 ,包含 所 有 
输出 值 的 集合 被 称 作 值 域 。 若 先 定义 映射 的 概念 ,可 以 简单 定义 函数 为 : 定义 在 非 空 数 集 之 
间 的 映射 称 为 函数 。 函 数 是 软件 开发 和 测试 的 重要 核心 概念 ,所 有 功能 性 测试 的 基础 都 是 
函数 。 

可 以 将 函数 看 成 “ 黑 盒 ”, 它 将 有 效 的 输入 值 转换 为 唯一 的 输出 值 。 通 常 将 输入 值 称 作 函 
数 的 参数 ,将 输出 值 称 作 函数 的 值 。 例 如 ,可 以 把 网 上 订 票 系统 看 成 函数 ,其 中 的 订 票 时 间 、 起 
止 地 点 ,乘机 人 等 信息 是 函数 的 输入 ,函数 的 输出 可 能 是 相关 显示 信息 和 机 票 。 

软件 或 程序 都 可 以 看 做 是 将 其 输入 与 输出 关联 起 来 的 函数 。 用 数学 公式 表示 函数 ,输入 
是 函数 的 定义 域 ,输出 是 函数 的 值 域 。 其 定义 如 下 : 

给 定 的 集合 A 和 B, 函 数 / 是 AXB(A 与 B 的 笛 卡 儿 积 ) 的 一 个 子 集 ,使 得 对 于 ww € 
A,bi、b;EB, 对 于 f(a;)==b; ,f(aj)==b; ,车 6; 关 b;, 则 推出 a; 关 aj。 

在 上 面 的 定义 中 ,输入 值 的 集合 A 被 称 为 / 的 定义 域 ; 可 能 的 输出 值 的 集合 B 被 称 为 / 
的 对 映 域 。 函 数 的 值 域 是 指定 义 域 中 全 部 元 素 通 过 映射 / 得 到 的 实际 输出 值 的 集合 。 注 意 ， 
把 对 映 域 称 作 值 域 是 不 正确 的 ,函数 的 值 域 是 函数 的 对 映 域 的 子 集 。 

在 计算 机 科学 中 ,参数 和 返回 值 的 数据 类 型 分 别 确定 了 程序 、 子 程序 ,模块 的 定义 域 和 对 
映 域 。 因 此 ,定义 域 和 对 映 域 是 函数 一 开始 就 确定 的 强制 约束 。 另 一 方面 , 值 域 和 程序 、 子 程 
序 和 模块 的 具体 实现 有 关 。 

函数 可 分 为 : 

(1) 单 射 函 数 : 将 不 同 的 变量 映射 到 不 同 的 值 。 即 车 x 和 y 属于 定义 域 , 则 仅 当 z=y 时 
有 f(z)=f(y)。 

(2) 满 射 函 数 : 其 值 域 即 为 其 对 映 域 。 即 对 映射 /的 对 映 域 中 的 任意 y ,都 存在 至 少 一 个 
工 满足 FCz) 一 y。 

(3) 双 射 函数 : 既是 单 射 的 又 是 满 射 的 ,也 叫 一 一 对 应 。 双 射 函数 经 常 被 用 于 表明 集合 
和 y 是 等 势 的 , 即 有 一 样 的 基数 。 如 果 在 两 个 集合 之 间 可 以 建立 一 个 一 一 对 应 关系 , 则 说 这 
两 个 集合 等 势 。 

在 实际 的 测试 中 ,软件 ,程序 、 子 程序 模块 和 单 射 函 数 、 满 射 函数 及 双 射 函数 具有 相似 的 
对 应 关系 ,对 于 测试 有 很 重要 的 启发 。 

复合 函数 在 软件 开发 中 也 有 着 很 多 实践 意义 。 假 设 有 下 列 集合 和 函数 ,使 得 一 个 函数 的 
值 域 是 男 一 个 函数 的 定义 域 : 

F:A—B 
gi B=C 
hsC==D 


设 a€EA0EB.cECdED, 并 且 f(a) 一 b、g(5) 二 ch(c) 一 d, 则 函数 hg 和 三 的 复合 为 : 
heg* fla)=h(g(f(a)))=h(g(b)) =h(c)=d 
例如 ,一 个 软件 系统 ,通过 销售 人 员 的 销售 额 .请假 次 数 , 级 别 和 工作 时 间 长 短 作为 标准 进 
行 定 量 考评 ,根据 考评 结果 来 计算 年 终 奖 ,这 就 是 一 个 复合 函数 问题 : 
Fi (销售 额 ,请 假 次 数 , 级 别 , 工 作 时 间 长 短 ) = 考评 结果 
Fa: (考评 结果 ) = 年 终 奖 
由 于 复合 函数 会 出 现 定义 域 / 值 域 兼容 性 的 问题 , 即 上 面 复 合 函 数 g(5) 中 4。 可 能 取 多 个 
值 的 问题 ,这 可 能 会 对 测试 人 员 造 成 困扰 。 对 于 测试 人 员 有 帮助 的 一 面 是 ,对 于 给 定 函 数 ,其 
逆 函 数 能 充当 某 种 "交叉 检查 ”的 角色 ,而 这 常常 有 助 于 功能 性 测试 用 例 的 设计 。 


1.1.3 关系 


从 哲学 的 角度 ,关系 是 反映 事物 及 其 特性 之 间 的 相互 联系 ,是 不 同事 物 、 特 性 的 一 种 统一 
形式 。 世 界 上 的 任何 事物 都 同 它 周围 的 事物 相互 联系 着 ,这 种 联系 表明 它们 彼此 存在 着 一 致 
性 ` 共 同性 ,在 此 基础 上 形成 不 同 的 事物 ,特性 的 统一 形式 , 即 表现 为 一 定 的 关系 。 诸 如 家 庭 关 
系 、 社 会 关系 、 人 际 关 系 .组 织 关系 和 社团 关系 等 。 就 人 而 言 , 可 以 说 没有 人 不 处 在 各 种 关系 交 
织 的 网 络 之 中 。 

从 数学 的 角度 ,对 于 函数 ,规定 定义 域 元 素 不 能 与 多 个 值 域 元 素 关联 必 函 数 "意味 着 事物 
之 间 存 在 着 某 种 确定 的 关系 表示 。 并 不 是 所 有 关系 都 是 严格 意义 上 的 函数 ,如 果 将 零件 种 类 
和 产品 的 关系 看 作 是 零件 种 类 集合 与 产品 集合 之 间 的 映射 ,一 种 零件 可 以 装配 多 种 产品 ,一 种 
产品 有 多 种 类 型 的 零件 装配 ,这 是 一 种 多 对 多 的 映射 。 而 函数 与 关系 都 是 以 集合 论 为 基础 的 。 

函数 是 关系 的 一 种 特例 ,两 者 都 是 笛 卡 儿 积 的 子 集 。 
集合 之 间 的 关系 定义 如 下 : 
给 定 两 个 集合 A 和 于, 关系 尽 是 笛 卡 儿 积 AXB 的 一 个 子 集 。 
如 果 希 望 描述 整个 关系 , 则 通常 只 写 RSAXB。 对 于 特定 元 素 a;€ A .bE€B, 记 作 aiRb;。 
有 关 关 系 的 详细 论述 这 里 从 略 ,我 们 更 有 兴趣 的 是 在 计算 机 领域 关系 是 数据 建 模 和 面向 对 象 
分 析 的 基础 ,也 是 软件 测试 用 例 设 计 的 依据 。 
下 面 解释 一 个 术语 : 势 。 势 在 用 于 集合 时 ,是 指 集合 中 元 素 的 个 数 。 由 于 关系 也 是 集合 ， 
因此 可 以 期 望 关系 的 势 是 指 有 和 多少 有 序 对 偶 在 集合 RSAXB 中 。 但 是 ,实际 上 并 非 如 此 。 
关系 的 势 的 定义 为 : 
给 定 两 个 集合 A 和 B ,一 个 关系 RCAXB, 关 系 RR 的 势 是 : 
。 一 对 一 势 : 当 且 仅 当 R 是 A 到 B 的 一 对 一 函数 。 
。 多 对 一 势 : 当 且 仅 当 R 是 A 到 B 的 多 对 一 函数 。 
。 一 对 多 势 : 当 且 仅 当 至 少 有 一 个 元 素 aEA 在 R 中 的 两 个 有 序 对 偶 中 , 即 (a,b) ER 
和 (a,b;)ER,。 

。 多 对 多 势 : 当 且 仅 当 至 少 有 一 个 元 素 a€ A 在 R 中 的 两 个 有 序 对 偶 中 , 即 (a,b;) ER 
和 (a,b;)ER。 并 且 至 少 有 一 个 元 素 bE A 在 R 中 的 两 个 有 序 对 偶 中 , 即 (a ,0》ER 和 
(aj,b6) ER, 

函数 映射 到 值 域 上 或 值 域 之 间 的 差别 可 以 与 关系 类 比 ,这 就 是 参与 的 概念 ,其 定义 为 : 给 
定 两 个 集合 A 和 B ,一 个 关系 RCAXB, 关 系 R 的 参与 是 : 

。 全 参与 : 当 且 仅 当 A 中 的 所 有 元 素 都 在 R 的 某 个 有 序 对 偶 中 。 


。 部 分 参与 : 当 且 仅 当 A 中 有 元 素 不 在 尺 的 某 个 有 序 对 偶 中 。 

。 上 参与 : 当 且 仅 当 B 中 的 所 有 元 素 都 在 R 的 某 个 有 序 对 偶 中 。 

。 中 参与 : 当 且 仅 当 B 中 有 元 素 不 在 R 的 某 个 有 序 对 偶 中 。 

通俗 的 理解 就 是 : 如 果 关 系 适 用 于 A 的 每 个 元 素 , 则 关系 是 全 参与 ; 如 果 关 系 不 适用 于 
A 的 所 有 元 素 , 则 关系 是 部 分 参与 。 描 述 这 种 差别 的 另 一 种 方式 是 强制 参与 和 可 选 参与 。 类 
似 地 ,如 果 关 系 适 用 于 B 的 每 一 个 元 素 ,关系 是 上 参与 ; 如 果 关 系 不 适用 于 B 的 所 有 元 素 , 关 
系 是 中 参与 。 全 参与 /部 分 参与 和 上 参与 /中 参与 都 具有 平行 性 。 平 行 集合 就 是 要 求 在 关系 上 
有 方向 ,但 是 事实 上 不 需要 这 种 方向 性 。 部 分 原因 是 因为 笛 卡 儿 积 是 由 有 序 对 偶 组 成 ,明显 地 
拥有 第 一 和 第 二 元 素 。 

以 上 的 讨论 只 考虑 了 两 个 集合 之 间 的 关系 。 将 关系 扩展 到 三 个 或 更 多 集合 ,要 比 纯粹 的 
笛 卡 儿 积 复杂 。 有 三 个 集合 A、B、C, 以 及 一 个 关系 RCAXBXC。 希望 关系 严格 地 定义 在 三 
个 元 素 上 ,或 是 定义 在 一 个 元 素 和 一 个 有 序 对 偶 上 。 由 此 ,还 会 涉及 到 势 和 参与 的 定义 。 对 于 
参与 来 说 是 直接 而 简明 的 ,但 是 势 是 二 元 性 质 的。 这 就 需要 对 此 有 充分 、 细 致 的 考虑 。 在 设计 
测试 用 例 时 ,期 望 测试 用 例 和 规格 说 明 可 以 实现 在 对 偶 之 间 有 某 种 形式 的 全 参与 。 

软件 测试 人 员 需 要 理解 关系 的 定义 ,关系 的 定义 直接 与 被 测 软 件 性 质 有 关 。 在 基于 输出 
的 功能 测试 中 ,就 有 必要 了 解 上 参与 和 中 参与 的 差别 并 灵活 应 用 到 实际 的 软件 测试 中 ,给 测试 
用 例 的 设计 带 来 启发 。 

除 以 上 讨论 的 关系 外 ,还 要 讨论 两 个 比较 重要 的 关系 , 即 排序 关系 和 等 价 关 系 。 二 者 的 共 
同 点 是 都 定义 在 单个 集合 上 ,都 使 用 了 关系 的 具体 性 质 。 

设 A 是 一 个 集合 ,RSEAXA 是 定义 在 A 上 的 一 个 关系 , (a,a), (a,b),(b,a), 《b,c)， 
(asc)ER。 关 系 具有 4 个 特殊 属性 ,定义 如 下 : 

关系 RCAXA 是 : 

。 自 反 的 : 当 且 仅 当 所 有 a€ A,(a,a) ER。 

。 对 称 的 : 当 且 仅 当 (a,5) ER 过 >(b,a) ER 

。 反对 称 的 : 当 且 仅 当 (a,6),(b,a) ER=>a=b。 

。 传递 的 : 当 且 仅 当 (a .6),(b,c) ER=>(a,c) ER。 

家 庭 关 系 是 反映 这 4 个 特性 的 很 好 的 例子 。 

下 面 详细 介绍 一 下 排序 关系 和 等 价 关系 : 

。 关系 REAXA 是 排序 关系 ,如 果 R 满足 自 反 、 反 对 称 和 传递 的 特性 。 

排序 关系 有 方向 ,简单 地 像 三 、 三 二 = 二) 等 。 自 反 性 就 是 “不 比 …… 小 ”不 比 …… 起 
排序 关系 在 软件 中 常常 会 被 用 到 ,比如 在 数据 库 、 数 据 结构 中 就 有 涉及 。 常 见 的 排序 关系 的 应 
用 有 数据 访问 、 树 型 结构 和 数组 等 。 如 给 定 集 合 的 客 集 合 就 是 给 定 集 合 的 所 有 子 集 的 集合 ( 包 
括 全 集 和 空 集 )。 集 合 A 的 寡 集 合 记 做 P(A) 。 子 集 关 系 三 是 P(A) 上 的 一 种 排序 关系 ,因为 
它 是 自 反 的 ,任何 集合 都 是 其 自身 的 一 个 子 集 。 它 同时 也 是 反对 称 的 ,就 是 说 集合 本 身 是 相等 
的 ,并 且 它 还 是 传递 的 。 

。 关系 REAXA 是 等 价 关 系 ,如 果 R 满足 自 反 、 对 称 和 传递 的 特性 。 

等 价 关 系 也 是 常见 的 关系 ,相等 和 重 秋 就 是 两 个 立即 可 以 想到 的 例子 。 假 设 有 集合 B 上 
的 某 个 划分 A1 ,A。,…,A, ,我 们 说 B 的 两 个 元 素 65; 和 bs 是 相关 的 ( 即 6, R56s)。 如 果 如 和 bo 
是 在 相同 的 划分 元 素 中 ,这 个 关系 是 自 反 的 (任何 元 素 都 在 其 自己 的 划分 中 ) ,是 对 称 的 (如 果 
和 和 bs 是 在 某 个 划分 元 素 中 ,那么 5。 和 bi 也 是 在 这 个 划分 元 素 中 ) ,是 传递 的 (2 和 bs 是 在 


同一 个 集合 中 ,加 和 bs 也 在 同一 个 集合 中 , 则 b, 和 bs 在 同一 个 集合 中 )。 通 过 划分 定义 的 关 
系 叫做 由 划分 归纳 的 等 价 关系 。 逆 过 程 也 同样 存在 。 如 果 从 定义 在 一 个 集合 上 的 等 价 关 系 开 
始 , 则 可 以 根据 与 该 等 价 关系 相关 的 元 素 定义 子 集 , 这 就 是 划分 ,叫做 由 等 价 关系 归纳 的 划分 。 
这 种 划分 得 出 的 集合 叫做 等 价 类 。 最 终结 果 是 划分 和 等 价 关系 可 以 相互 交换 ,而 这 一 点 对 于 
测试 人 员 来 说 是 很 重要 的 概念 。 划 分 有 两 个 性 质 , 即 完备 性 和 无 宛 余 性 。 在 测试 领域 中 ,划分 
的 两 个 性 质 是 对 软件 测试 的 广度 的 最 好 证 明 。 不 仅 如 此 ,只 测试 等 价 类 中 的 一 个 元 素 ,并 假设 
剩余 的 元 素 有 类 似 的 测试 结果 ,可 大 大 提高 测试 效率 。 
另外 ,如 相似 三 角形 的 关系 ,所 有 居住 在 城市 某 区 居民 之 间 的 关系 也 是 等 价 关 系 。 


1.1.4 命题 逻辑 


合 论 和 命题 馆 辑 具有 一 种 鸡 和 和 蛋 的 关系 , 即 很 难 确定 应 该 先 讨 论 哪 一 个 。 命 题 对 于 命 
题 逮 辑 来 说 是 一 个 原始 的 概念 ,不 能 在 命题 迎 辑 的 范围 内 给 出 它 的 精确 定义 ,只 能 描述 它 的 性 
质 。 命 题 也 是 基本 术语 , 像 集合 一 样 不 能 定义 。 凡 是 能 分 辨 其 真 假 的 语句 都 叫做 命题 。 而 且 
命题 是 无 歧义 的 ,命题 要 么 是 真 要 么 是 假 ,给 定 一 个 命题 ,总 能 确定 其 真 假 。 命 题 必须 为 陈述 
名 ,不 能 为 疑问 句 、 祈 使 句 、 感 叹 句 等 。 

通常 采用 小 写字 母 p.g 和 表示 命题 。 命 题 巡 辑 有 着 和 集合 论 相 似 的 操作 、 表 达 式 和 标 
识 。 命 题 的 真 值 只 有 两 种 ,T 代 表 真 ,而 F 代表 假 。 

不 能 分 成 更 简单 的 陈述 句 的 命题 为 简单 命题 或 原子 命题 ,否则 称 为 复合 命题 。 例 如 ,天 下 
着 雨 ; 所 有 的 金属 都 是 导电 的 ; 所 有 的 新 闻 报 道 都 不 是 真实 的 ; 圆 是 平面 上 一 动 点 围绕 一 定 
点 作 等 距离 运动 所 留 下 的 轨迹 。 这 些 均 为 原子 命题 。 天 下 着 雨 ,并 且 地 上 是 湿 的 ; 天 没 下 雨 ， 
地 上 是 湿 的 ; 如 果 天 下 雨 , 那 么 地 上 是 湿 的 。 这 些 均 是 复合 命题 。 复 合 命题 使 用 命题 联结 词 
联结 简单 命题 而 得 到 。 三 种 基本 的 好 辑 操作 符 是 与 (人 ) .或 (V), 非 (")。 这 些 操 作 符 有 时 又 
叫做 合 取 、 析 取 和 非 。 非 是 唯一 的 一 元 迎 辑 操作 符 , 其 他 都 是 二 元 操作 符 。 联 合 词 的 定义 
如 下 : 


设 p 是 任意 命题 ,复合 命题 “ 非 p” 称 为 p 的 否定 ( 非 ), 记 为 -了 p。 

设 p 和 g 是 任意 命题 ,复合 命题 “p 且 g” 称 为 p 和 g 的 合 取 ( 与 ), 记 为 pg。 

设 p 和 g 是 任意 命题 ,复合 命题 “p 或 g” 称 为 p 和 9g 的 析 取 (或 ), 记 为 pVg。 

设 p 和 g 是 任意 命题 ,复合 命题 “如 果 p 则 g” 称 为 p 单条 件 g, 记 为 p>gq。 

设 p 和 g 是 任意 命题 ,复合 命题 “p 当 且 仅 当 gq” 称 为 p 与 q 的 双 条 件 , 记 为 pr*g。 
复合 命题 与 简单 命题 之 间 的 真 值 关系 如 表 1-1 所 示 ,其 中 0 代表 假 ,1 代表 真 。 


表 1-1 简单 命题 和 复合 命题 真 值 表 


p gq 7p phga pVg p>q prg 
| 0 1 1 
于 0 0 0 1 0 0 
0 1 0 1 1 0 
0 0 0 0 1 和 


PVg 的 逻辑 关系 是 户 V 9 为 真 , 当 且 仪 当 p 和 g 中 至 少 有 一 个 为 真 。 但 自然 语言 中 的 
“或 " 既 可 能 具有 相 容 性 ,也 可 能 具有 排斥 性 。 命 题 迎 辑 中 采用 了 “或 ”的 相 容 性 。 
命题 公式 的 真 值 只 与 命题 公式 中 所 出 现 的 命题 变量 的 真 值 赋 值 有 关 , 如果 命题 公式 中 含 


有 个 命题 变量 , 则 对 这 些 命题 变量 的 真 值 赋 值 共有 2" 种 不 同情 况 , 可 通过 一 个 表 列 出 在 这 
所 有 情况 下 命题 公式 的 真 值 , 这 种 表 称 为 该 命题 公式 的 真 值 表 。 给 定 一 个 迎 辑 表达 式 ,总 能 通 
过 由 括号 确定 的 顺序 “构造 出 " 真 值 表 , 如 表达 式 ((pV gq) 习 (( 了 了 "p)(gA 人 7))) 具 有 表 1-2 
所 示 的 真 值 表 。 

表 1-2 命题 公式 的 真 值 表 举 例 
(pVa) (一 力 ) (gMAn) (PDEAD) (pVOD>(T POA))) 
0 0 


-|i-|iclolololols 


-lolol-i-clololn 
回回 回回 四 回回 自 区 
olololol-i-i-|- 
-cololol-lolo 
ol-|i-|i-|i-liolo 
o-ool-|- 


由 命题 公式 的 真 值 表 ( 如 表 1-2 所 示 ) 可 以 得 到 命题 公式 的 分 类 : 
。 如 果 命 题 公式 A 在 任意 的 真 值 赋 值 函 数 下 的 真 值 :(A) 都 为 1, 则 称 命题 公式 A 为 永 
真 式 (tautology) (或 称 重 言 式 )。 

。 如 果 命 题 A 在 任意 的 真 值 赋 值 函 数 下 的 真 值 都 为 0, 则 称 A 为 矛盾 式 (contradiction) 。 

。 如 果 A 不 是 矛盾 式 , 则 称 为 可 满足 式 。 

下 面 讨论 逻辑 等 价 。 具 有 相同 真 值 表 的 两 个 多 辑 表达 式 ,不 管 基本 命题 取 什么 真 值 , 这 些 
表达 式 都 永远 具有 相同 的 真 值 ,定义 为 : 

两 个 命题 p 和 g 是 等 价 的 ( 记 做 po) , 当 且 仅 当真 值 表 相同 。“ 当 且 仅 当 ” 有 时 记 做 双向 
条 件 , 因 此 ,命题 p 当 且 仅 当 g 实际 上 是 (p 王 gqg) 人 (gp) , 记 做 pq。 所 以 也 可 以 这 样 定义 : 

设 pg 是 两 个 命题 公式 ,如果 prg 是 永 真 式 , 则 称 命题 公式 p 和 g 是 等 价 的 , 记 做 Po。 

使 用 真 值 表 ,不 难 证 明 下 面 的 定理 。 

【定理 】 设 pg 和 是 任意 的 命题 公式 .有 : 

双重 否定 律 : p 今 (了 (了 pp)) 

等 寡 律 : p 全 (pV p)p 守 (pAp) 

交换 律 : (pV gD) 全 (gqV p) (pAg)SO(g Np) 

结合 律 : ((pVoD)VoDS(pV (lqgVa) (pA ADDSO(pA (lgAg)) 

分 配 律 : (pV (gqACDSC(pVoD ApV pA (VoDS (pADV (pAr)) 

德 摩根 律 : (= 了 (pV 全 (CoDP)AGCI0D) (opAg)S (PPV (m9)) 

吸收 律 : (pV (pAg)SSp(pA (pV a Sp 

零 律 : (pV DSl(pAO)SO 

同一 律 : (pV0O)SSp(pA DSp 

排 中 律 : (pV (-p)) 全 1 

矛盾 律 : (pA(-p)) 全 0 

蕴涵 等 值 式 : (p 一 gq) 全 (( 了 p)Vg) 

等 价 等 值 式 : (pg) 富 ((p>q) 人 (g>p)) 

假 言 易 位 : (p 一 gD) 全 (( 了 gqg) 一 (一 p)) 


等 价 否 定 等 值 式 : (pg) 仿 (( 了 jp) 于 (gqg)) 
归 雇 论 : ((p 一 q) A(p(m da))) 全 (一 轧 ) 
上 述 定理 中 的 0 代表 真 值 为 0 的 任意 命题 常量 ,而 1 代表 真 值 为 1 的 任意 命题 常量 。 


1.1.5 概率 论 


概率 论 是 研究 随机 现象 数量 规律 的 数学 分 支 。 随 机 现象 是 相对 于 决定 性 现象 而 言 的 。 在 
一 定 条 件 下 必然 发 生 某 一 结果 的 现象 称 为 决定 性 现象 。 例 如 在 标准 大 气压 下 , 纯 水 加 热 到 
100C 时 水 必然 会 沸腾 等 。 随 机 现象 则 是 指 在 基本 条 件 不 变 的 情况 下 ,一 系列 试验 或 观察 会 得 
到 不 同 结果 的 现象 。 每 一 次 试验 或 观察 前 ,不 能 肯定 会 出 现 哪 种 结果 ,呈现 出 偶然 性 。 例 如 ， 
掷 一 硬币 ,可 能 出 现 正面 或 反面 ; 在 同一 工艺 条 件 下 生产 出 的 灯泡 ,其 寿命 长 短 参 差 不 齐 等 。 
随机 现象 的 实现 和 对 它 的 观察 称 为 随机 试验 。 随 机 试验 的 每 一 可 能 结果 称 为 一 个 基本 事件 ， 
一 个 或 一 组 基本 事件 统称 随机 事件 ,或 简称 事件 。 事 件 的 概率 则 是 衡量 该 事件 发 生 的 可 能 性 
的 量度 。 虽 然 在 一 次 随机 试验 中 某 个 事件 的 发 生 是 带 有 偶然 性 的 ,但 那些 可 在 相同 条 件 下 大 
量 重复 的 随机 试验 却 往往 呈现 出 明显 的 数量 规律 。 例 如 ,连续 多 次 掷 一 均匀 的 硬币 ,出 现 正面 
的 频率 随 着 投掷 次 数 的 增加 逐渐 趋向 于 1/2。 又 如 ,多 次 测量 一 物体 的 长 度 ,其 测量 结果 的 平 
均值 随 着 测量 次 数 的 增加 ,逐渐 稳定 于 一 常数 ,并 且 诸 测量 值 大 都 落 在 此 常数 的 附近 ,其 分 布 
状况 呈现 中 间 多 ,两 头 少 及 某 程度 的 对 称 性 。 大 数 定律 及 中 心 极 限定 理 就 是 描述 和 论证 这 些 
规律 的 。 在 实际 生活 中 ,人 们 往往 还 需要 研究 某 一 特定 随机 现象 的 演变 情况 的 随机 过 程 。 例 
如 ,微小 粒子 在 液体 中 受 周 围 分 子 的 随机 碰撞 而 形成 不 规则 的 运动 ( 即 布朗 运动 ) ,这 就 是 随机 
过 程 。 随 机 过 程 的 统计 特性 ,计算 与 随机 过 程 有 关 的 某 些 事件 的 概率 ,特别 是 研究 与 随机 过 程 
样本 轨道 ( 即 过 程 的 一 次 实现 ) 有 关 的 问题 是 现代 概率 论 的 主要 课题 。 

在 软件 测试 领域 ,如 研究 语句 执行 特定 路 径 的 概率 时 需要 使 用 概率 论 。 例 如 ,执行 路 径 有 
很 多 条 ,其 至 无 数 条 ,和 具体 的 业务 结合 后 哪些 执行 路 径 的 业务 概率 高 ,这 是 测试 人 员 必 须 研 
究 的 问题 。 这 里 介绍 概率 论 的 初步 知识 和 测试 中 用 到 的 一 些 概 念 。 

概率 是 随机 事件 发 生 的 可 能 性 的 数量 指标 。 在 独立 随机 事件 中 ,如 果 某 一 事件 在 全 部 事 
件 中 出 现 的 频率 在 更 大 的 范围 内 比较 明显 地 稳定 在 某 一 固定 常数 附近 ,就 可 以 认为 这 个 事件 
发 生 的 概率 为 这 个 常数 。 任 何事 件 的 概率 值 一 定 介 于 0 一 1 之 间 。 

下 面 讨论 基本 概念 , 即 事件 的 概率 。 

事件 的 概率 是 指 结果 可 能 性 相等 的 有 限 样本 空间 S 中 的 事件 E 的 概率 ,就 是 p(E) 一 
II/1S|I。 

这 个 定义 依赖 输出 结果 的 经 验 , 样 本 空间 是 所 有 可 能 结果 的 集合 ,事件 是 结果 的 子 集 。 作 
为 测试 人 员 ,我 们 关心 发 生 了 的 事情 ,把 这 些 事情 叫做 事件 ,并 称 所 有 事件 的 集合 是 我 们 的 论 
域 ( 全 集 ) 空 间 。 接 下 来 ,用 命题 定义 事件 ,使 得 命题 能 够 引用 论 域 空间 中 的 元 素 。 现 在 ,对 于 
某 个 论 域 空间 U 和 某 个 关于 U 的 元 素 的 命题 p .有 以 下 定义 : 

命题 p 的 真 值 集合 T 记 作 T(p), 是 p 为 真 的 论 域 空间 U 中 所 有 元 素 的 集合 。 

命题 要 么 是 真 ,要 么 是 假 , 因 此 命题 p 将 论 域 空间 划分 为 两 个 子 集 , 即 TC(p) 和 (TC(p)), 二 
者 的 并 集 为 U。 

下 面 给 出 有 关 概 率 的 一 些 定理 ,这 些 定理 涉及 给 定论 域 空间 命题 p 和 g , 真 值 集合 T(p) 
和 T(g): 

“PAD= Pr(p) 


。 Pr(plg)=Pr(p) xX Pr(g) 

。 Pr(plg)=Pr(p)+Pr(g)—Pr(plg) 

以 上 定理 结合 了 集合 论 和 命题 恒等式 ,为 操作 概率 表达 式 提供 了 强 有 力 的 代数 能 力 。 

有 一 类 随机 事件 , 它 具 有 两 个 特点 : 第 一 ,只 有 有 限 个 可 能 的 结果 ; 第 二 ,各 个 结果 发 生 
的 可 能 性 相同 。 具 有 这 两 个 特点 的 随机 现象 叫做 “古典 概 型 ”。 

在 客观 世界 中 ,存在 大 量 的 随机 现象 ,随机 现象 产生 的 结果 构成 了 随机 事件 。 如 果 用 变量 
来 描述 随机 现象 的 各 个 结果 ,就 叫做 随机 变量 。 随 机 变量 有 有 限 和 无 限 的 区 分 ,一般 又 根据 变 
量 的 取 值 情况 分 成 离散 型 随机 变量 和 非 离散 型 随机 变量 。 一 切 可 能 的 取 值 能 够 按 一 定 次 序 一 
一 列举 ,这 样 的 随机 变量 叫做 离散 型 随机 变量 ; 如 果 可 能 的 取 值 充满 了 一 个 区 间 ,无 法 按 次 序 
一 一 列举 ,这 种 随机 变量 就 叫做 非 离散 型 随机 变量 。 

随机 变量 和 随机 测试 有 着 紧密 的 关系 ,假设 被 测 软 件 是 一 个 函数 ,其 有 个 输入 变量 , 那 
么 nn 个 变量 的 m 个 随机 数 的 组 合 就 是 不 同 的 测试 用 例 的 组 合 。 


1.1.6 图 论 


图 论 是 拓扑 学 的 一 个 分 支 。 对 于 计算 机 科学 来 说 ,图 论 在 算法 设计 等 领域 有 着 广泛 的 应 
用 。 它 是 以 图 为 研究 对 象 ,研究 节点 和 边 组 成 图 形 的 数学 理论 和 方法 。 图 论 中 的 图 是 由 若干 
给 定 的 点 及 连接 两 点 的 边 所 构成 的 图 形 , 这 种 图 形 通 常用 来 描述 某 些 事 物 之 间 的 某 种 特定 关 
系 ,用 点 代表 事物 ,用 连接 两 点 的 边 表示 相应 两 个 事物 间 具 有 某 种 关系 。 

在 测试 中 通常 使 用 两 种 基本 图 : 无 向 图 和 有 向 图 ,而 后 者 是 前 者 的 特例 。 下 面 首先 介绍 
有 向 图 ,之 后 讨论 无 向 图 时 就 可 以 继承 很 多 概念 。 

下 面 给 出 一 些 基 本 概念 。 

图 (又 叫做 线性 图 ) 是 一 种 由 两 个 集合 定义 的 抽象 数据 结构 , 即 一 个 节点 集合 和 一 个 构成 
节点 之 间 连 接 的 边 集合 。 图 的 更 形式 化 的 定义 如 下 : 

图 G=(V,E) 由 节点 的 有 限 ( 并 且 非 空 ) 集 合 V== (ma ,za ,…，,zw} 和 节点 无 序 对 偶 集 合 二 
{es,ez，… ,ep) 组 成 。 其 中 每 条 边 ei 二 人 nisn) snivn; EV。 

革 点 有 时 又 叫做 顶点 , 边 有 时 又 叫做 弧 ,有 时 又 把 节点 叫做 弧 的 端点 。 通 常用 圆圈 表示 节 
点 ,用 节点 对 之 间 的 连 线 表示 边 。 通 常 把 节点 看 做 是 程序 语句 ,用 各 种 
边 表 示 控 制 流 或 定义 /使 用 关系 。 

图 中 节点 的 度 是 以 该 节点 作为 端点 的 边 的 条 数 。 

1. 有 向 图 

若 图 G 中 的 每 条 边 都 是 有 方向 的 , 则 称 G 为 有 向 图 (Digraph)。 有 
向 边 的 表示 : 在 有 向 图 中 ,一 条 有 向 边 是 由 两 个 顶点 组 成 的 有 序 对 .有 序 
对 通常 用 尖 括 号 表示 。 有 向 边 也 称 为 弧 (Arc), 边 的 始点 称 为 弧 尾 Uy 
(Tail) ,终点 称 为 弧 头 (Head)。 例 如 ,wi,vw) 表 示 一 条 有 向 边 ,vw 是 边 的 
始点 (起 点 ),v 是 边 的 终点 。 因 此 , 《vi,v) 和 (wj ,vi) 是 两 条 不 同 的 有 向 
边 。 有 向 图 的 表示 : 如 图 1-2 所 示 的 有 向 图 ,图 中 边 的 方向 是 用 从 始点 
指向 终点 的 箭头 表示 的 ,该 图 的 顶点 集 和 边 集 分 别 为 : 

V(G)= {vw ,v2 ,v3} 

E(G)={(v ,v2), (vv (vos v3)} 


vl 


Uy 


1-2 有 向 图 示例 


2. 无 向 图 
车 图 G 中 的 每 条 边 都 是 没有 方向 的 , 则 称 G 为 无 向 图 (Undigraph)。 无 向 边 的 表示 : 无 
向 图 中 的 边 均 是 顶点 的 无 序 对 ,无 序 对 通常 用 圆 括号 表示 。 例 如 ,无 序 对 (ww) 和 (wyuw) 表 
示 同 一 条 边 。 无 向 图 的 表示 : 如 图 1-3 所 示 的 G。 和 Gs 无 向 图 ,它们 的 顶点 集 和 边 集 分 别 为 : 
V(G;) = {v3v2 ,03 ,04} 
E(G:) = {((oyuz), (oos), (ouw) Varv3) ,Vas 0) (vs sv04)} 
V(Gs) = {vi V2 9 V3 9304 Vs 1 Ue rr} 
E(G3) = {((u yuz), (ous) (yu) (yus) CVs,ve), (Vs, vw)} 
3. 其 他 三 种 图 


程序 图 、 有 限 状 态 机 和 状态 图 这 三 种 图 在 
软件 测试 中 被 广泛 应 用 。 程 序 图 主要 用 于 单 
元 测试 层次 ,其 他 两 种 图 则 适合 用 来 描述 系统 “ 
级 行为 ,设计 系统 级 的 测试 用 例 ,当然 也 可 以 
用 于 较 低层 次 的 测试 。 


1) 程序 图 

程序 图 是 图 论 在 软件 测试 中 最 常见 的 使 
用 工具 。 程 序 图 的 传统 定义 是 : 节点 是 程序 语句 , 边 表示 控制 流 (从 节点 i 到 节点 j 有 一 条 边 ， 
当 且 仅 当 对 应 节点 7 的 语句 可 以 立即 在 节点 i 对 应 的 语句 之 后 执行 )。 经 过 改进 的 程序 图 定 
义 为 : 节点 要 么 是 整个 语句 ,要 么 是 语句 的 一 部 分 ,如 程序 图 中 的 节点 可 能 表示 if 语句 、case 
语句 中 的 一 个 分 支 语句 。 边 表示 控制 流 ( 从 节点 i 到 节点 j 有 一 条 边 , 当 且 仅 当 对 应 节点 j 的 
语句 或 语句 的 一 部 分 ,可 以 立即 在 节点 i 对 应 的 语句 或 语句 的 一 部 分 之 后 执行 )。 程 序 的 有 向 
图 公式 会 为 软件 测试 提供 帮助 ,如 在 单元 测试 级 别 , 节 点 表示 语句 或 语句 第 一 部 分 ; 在 集成 测 
试 级 别 ,节点 表示 一 个 模块 或 一 个 类 (对 象 ); 在 系统 测试 级 别 ,节点 表示 系统 的 功能 。 程 序 图 
中 的 串 行 .选择 和 循环 等 可 以 用 图 1-4 所 示 的 有 向 图 来 表示 。 


<P <> 从 


(a) 申 行 。 (b) If-Then-Else (©) If-Then (d) 条 件 (e) 前 测试 环 路 。 “(后 测试 环 路 
图 1-4 结构 化 程序 设计 构造 的 有 向 图 


图 1-3 无 向 图 G 和 Gs 


当 把 这 些 程序 的 基本 结构 用 于 被 测试 程序 中 的 时 候 , 对 应 的 图 会 存在 嵌 套 压缩。 根据 单 
入 口 : 单 出 口 的 评判 准则 ,要 求 在 程序 图 中 有 唯一 的 原 节点 和 唯一 的 汇 节点 。 事 实 上 , 非 结 构 
化 的 “空心 节点 ”会 产生 非常 复杂 的 程序 图 。 例 如 ,GOTO 语句 会 引入 边 , 当 GOTO 语句 用 于 
跳 人 或 跳出 循环 时 ,所 产生 的 程序 图 甚至 更 复杂 。 在 这 个 方面 最 早 进行 研究 的 学 者 之 一 是 
Thomas McCabe, 他 用 图 的 圈 数 衡量 程序 复杂 度 而 成 为 普遍 采用 的 指标 。 当 执行 程序 时 ,所 执 
行 的 语句 构成 程序 图 中 的 一 条 路 径 。 由 于 环 路 和 判断 的 存在 大 大 增加 了 可 能 的 路 径 数 ,因此 需 
要 对 程序 图 进行 研究 以 减少 被 测试 的 路 径 , 同 时 又 能 保证 测试 的 效果 ,达到 某 种 要 求 的 覆盖 。 
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程序 图 存在 的 问题 是 如 何 处 理 非 执行 语句 ,例如 注释 和 数据 说 明 语句 。 最 简单 的 回答 是 
不 考虑 这 些 语句 。 

2) 有 限 状 态 机 

有 限 状 态 机 已 经 成 为 需求 规格 说 明 的 一 种 非常 有 效 的 建 模 表 示 方 法 。 所 有 结构 化 分 析 的 
实时 扩展 都 要 使 用 某 种 形式 的 有 限 状 态 机 ,并 且 几 乎 所 有 形式 的 面向 对 象 分 析 也 都 要 使 用 有 
限 状 态 机 。 有 限 状态 机 是 一 种 有 向 图 ,其 中 状态 是 节点 ,转移 是 边 。 初 始 节点 称 为 源 节点 , 终 
止 节 点 可 称 为 汇 节点 ,路径 被 建 模 为 通路 等 。 大 多 数 有 限 状 态 机 的 表示 方法 都 要 为 边 (转移 ) 
增加 信息 ,以 指示 转移 的 原因 和 作为 转移 的 结果 要 发 生 的 行动 。 

图 1-5 所 示 是 一 个 简单 的 自动 柜员 机 (Simple Automatic Teller Machine,SATM) 系统。 
该 图 描述 ATM 系统 用 户 输入 密码 时 的 部 分 有 限 状态 机 。 这 种 机 器 包含 5 个 状态 (空闲 、 等 待 
第 一 次 PIN 尝试 等 ) 和 8 个 用 边 表示 的 转移 。 转 移 上 的 标签 所 遵循 的 规则 是 :“ 分 子 ? 是 引起 
转移 的 事件 ,“ 分 母 "是 与 该 转移 关联 的 行为 。 事 件 必须 标明 , 即 转移 不 能 无 原因 的 发 生 , 但 是 
可 以 没有 行动 。 有 限 状 态 机 是 表示 可 能 发 生 的 各 种 事件 ,以 及 事件 发 生 后 可 能 的 结果 的 表示 。 
假设 客户 只 能 有 三 次 输入 密码 的 机 会 。 假 设 第 一 次 输入 正确 ,系统 会 有 输出 行为 ,并 做 出 相应 
的 提示 。 如 果 输 入 的 PIN 不 正确 , 则 机 器 会 进入 一 个 不 同 的 状态 ,等 待 第 二 次 尝试 。 第 二 次 
PIN 尝试 状态 转移 时 的 事件 和 行为 ,与 第 一 次 转移 的 事件 和 行为 相同 。 这 就 是 有 限 状 态 机 保 
留 过 去 事件 历史 的 方式 。 


显示 屏幕 S1 


不 正确 的 PIN 
显示 屏幕 S4 


合法 卡 
显示 屏幕 S2 


错 卡 
显示 屏幕 S1， 并 退回 卡 


不 正确 的 PIN 
显示 屏幕 S3 


不 正确 的 PIN 
显示 屏幕 S3 
正确 PIN 
显示 屏幕 S5 


正确 PIN 
显示 屏幕 S5 


正确 PIN 
显示 屏幕 S5 


1-5 ”尝试 密码 (PIN) 的 有 限 状 态 机 


有 限 状 态 机 是 程序 或 系统 的 执行 路 径 , 由 于 状态 的 转移 是 由 事件 触发 的 , 当 某 事件 发 生 
后 ,将 从 一 种 状态 转移 到 另 一 种 状态 , 即 程序 或 系统 “处 于 "一 定 状 态 。 如 果 程 序 或 系统 建 模 为 
有 限 状态 机 , 则 某 活动 状态 是 指 * 我 们 所 处 ”的 状态 。 一 般 情 况 下 ,有 限 状 态 机 可 能 有 一 个 初始 
状态 , 即 最 初 进入 该 有 限 状态 机 时 是 活动 的 状态 。 

在 任何 时 候 , 一 次 只 能 有 一 个 状态 是 活动 的 。 还 可 以 把 转移 看 作 是 瞬间 发 生 ,引起 转移 的 


时 间 也 是 一 次 发 生 一 个 。 为 了 执行 有 限 状 态 机 ,要 从 初始 状态 开始 ,并 提供 引起 状态 转换 的 事 
件 序列 。 每 次 事件 发 生 时 ,转移 都 会 改变 活动 状态 ,并 发 生 新 的 事件 。 通 过 这 种 方式 ,一 系列 
事件 就 会 选择 通过 有 限 状 态 机 的 状态 路 径 , 这 些 路 径 提 供 了 设计 测试 用 例 的 分 析 依 据 ,可 以 依 
据 这 些 状 态 路 径 设 计 测 试用 例 ,或 者 依据 状态 图 的 节点 覆盖 或 边 覆 盖 来 设计 测试 用 例 ,以 达到 
状态 图 的 节点 覆盖 和 边 覆盖 。 

3) 状态 图 

David Harel 在 开发 状态 图 表示 法 时 有 两 个 目标 : 他 要 将 具有 描述 测试 层次 结构 能 力 的 
维 恩 图 和 描述 连接 性 能 力 的 有 向 图 结合 在 一 起 ,开发 出 一 种 可 视 化 的 表示 方法 (Harel,1998) 。 
这 些 能 力 为 一 般 有 限 状态 机 的 “状态 爆炸 ”问题 提供 了 一 种 理想 的 解决 方案 。 所 产生 的 结果 是 
一 种 非常 精确 的 标记 ,并 且 能 够 由 商业 化 的 CASE 工具 提供 支持 ,如 著名 的 工具 有 iLogix 公 
司 的 StateMate 系统 。 状 态 图 也 被 Rational 公司 (已 被 IBM 收购 ) 选 为 统一 建 模 语言 之 一 , 即 
UML 的 控制 模型 。 在 UML 中 状态 图 可 以 用 于 描述 类 、 系 统 等 的 状态 。 

Harel 使 用 与 方法 无 关 的 术语 “ 团 点 "表示 状态 图 的 基本 构建 块 ， 
团 点 可 以 像 维 恩 图 显示 集合 包含 那样 包含 其 他 团 点 。 团 点 还 可 以 像 
在 有 向 图 中 连接 节点 一 样 通过 边 连接 其 他 团 点 。 在 图 1-6 中 , 团 点 A 
包含 两 个 团 点 B 和 C ,通过 边 连接 , 团 点 A 通过 边 与 团 点 D 连接 。 

根据 Harel 的 意图 ,可 以 把 团 点 解释 为 状态 ,把 边 解释 为 转移 。 完 
整 的 状态 图 支持 详细 的 描述 语言 ,定义 转移 如 何 发 生 和 什么 时 候 发 
生 。 状 态 图 与 一 般 有 限 状 态 机 相 比 ,能 够 以 更 详细 的 方式 运行 。 执 行 状态 图 需要 使 用 与 Petri 
网 (有 关 Petri 网 ,读者 可 以 查阅 相关 文献 ) 标 记 类 似 的 概念 。 状 态 图 的 “初始 状态 ”由 没有 源 状 
态 的 边 表示 。 当 状态 嵌入 在 其 他 状态 内 部 时 ,使 用 同样 的 方式 显示 低层 初始 状态 。 在 图 1-7 中 ， 
状态 A 是 初始 状态 , 当 进入 到 这 个 状态 时 ,也 进入 低层 状态 B。 当 进入 某 个 状态 时 ,可 以 认为 
该 状态 是 活动 的 ,这 可 与 Petri 网 中 的 被 标记 地 点 类 比 。 状 态 图 工具 采用 色彩 表示 哪个 状态 
是 活动 的 ,等 效 于 Petri 网 中 的 标记 地 点 。 图 1-7 中 有 一 些微 妙 的 地 方 , 从 状态 A 转移 到 状态 
D 初 看 起 来 是 有 歧义 的 ,因为 它 没有 区 分 状态 B 和 CC。 我们 的 约定 是 , 边 必须 开始 和 结束 于 状 
态 的 周围 。 如 果 状 态 包含 子 状态 ,就 像 图 中 的 A 一样 , 边 会 “引用 ”所 有 的 子 状态 。 因 此 ,从 A 
到 了 的 边 意味 着 转移 可 以 从 状态 B 或 状态 C 来 发 生 。 如 果 有 从 状态 D 到 状态 A 的 边 , 如 图 
1-8 所 示 , 则 用 B 来 表示 初始 状态 这 个 事实 ,意味 着 转移 实际 上 是 从 状态 D 到 状态 B。 这 种 约 
定 可 以 大 大 减缓 有 限 状 态 机 向 “空心 代码 "发 展 的 趋势 。 

最 后 要 讨论 一 个 状态 图 的 特性 , 即 并 发 状态 图 概念 。 图 1-9 中 状态 D 的 虚线 用 于 表示 状 
态 DD 实际 上 引用 两 个 并 发 状态 已 和 下 。Harel 的 约定 是 将 状态 标签 D 移 到 该 状态 周边 的 拢 
形 标号 上 。 虽 然 这 里 没有 显示 出 来 ,但 是 可 以 把 已 和 下 想象 为 并 发 执行 的 平行 机 器 。 由 于 从 
状态 A 出 来 的 边 在 状态 D 的 周边 终止 ,因此 当 转 移 发 生 时 ,机 器 正和 下 都 是 活动 的 , 即 被 
标记 。 


图 1-6 状态 图 的 团 点 


图 1-7 状态 图 中 的 初始 状态 图 1-8 进入 自 状 态 的 默认 入 口 
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1.2 软件 测试 的 现状 与 发 展 


1.2.1 软件 测试 的 现状 


软件 的 出 现 同 时 也 伴随 着 软件 测试 的 产生 ,也 就 是 说 有 了 软件 开发 和 运行 就 必然 有 软件 
测试 。 在 早期 的 软件 开发 过 程 中 ,由 于 软件 的 规模 小 ,测试 技术 和 测试 过 程 管 理 不 成 熟 ,测试 
的 含义 比较 狭窄 ,将 测试 过 程 等 同 于 “调试 "过 程 ,其 目的 是 定位 已 经 知道 的 缺陷 并 纠正 。 这 时 
候 的 软件 测试 常常 由 开发 人 员 自 己 完成 这 部 分 的 工作 。 对 测试 的 投入 少 , 测 试 介 入 得 也 晚 , 常 
常 是 等 到 形成 代码 ,软件 产品 已 经 基本 完成 时 才 进 行 测试 。 

直到 20 世纪 50 年 代 , 软 件 测试 才 开始 与 调试 加 以 区 分 ,成 为 一 种 发 现 软件 缺陷 的 重要 活 
动 。 由 于 早期 人 们 存在 着 “为 了 使 我 们 早 些 看 到 软件 产品 能 工作 ,就 得 将 测试 工作 一 直 往 后 
推 ? 的 想法 ,测试 并 不 是 贯穿 于 整个 开发 过 程 ,而 仅仅 是 软件 开发 后 期 的 活动 。 在 潜意识 里 , 测 
试 的 目的 是 使 自己 确信 软件 产品 能 够 运行 起 来 ,而 软件 产品 的 功能 是 否 满 足 客 户 需 求 , 非 功能 
性 需求 是 否 达到 相关 指标 等 是 在 软件 产品 运行 起 来 后 才 去 考虑 的 问题 。 到 了 20 世纪 70 年 
代 , 尽 管 对 “软件 工程 ”的 真正 含义 还 缺乏 共识 ,但 这 一 词 条 已 经 频繁 出 现 。1972 年 ,在 北 卡 罗 
来 纳 大 学 举行 了 首届 软件 测试 正式 会 议 。1975 年 ,John Good Enough 和 Susan Gerhart 在 
IEEE( Institute of Electrical and Electronic Engineers) 上 发 表 了 “测试 数据 选择 的 原理 
(Toward a Theory of Test Data Selection)” 的 文章 ,软件 测试 才 被 确定 为 一 种 研究 方向 。 而 
1979 年 ,Glen Ford Myers 的 《软件 测试 艺术 》(The Art of Software Testing) 可 以 算是 软件 测 
试 领域 的 第 一 本 最 重要 的 专著 ,Myers 作为 当时 最 好 的 软件 测试 者 ,其 对 软件 测试 定义 是 : 
“测试 是 为 发 现 错误 而 执行 的 一 个 程序 或 者 系统 的 过 程 ”。Myers 以 及 他 的 同事 们 在 20 世纪 
70 年 代 的 工作 是 软件 测试 发 展 的 里 程 碑 。 

直到 20 世纪 80 年 代 初期 软件 质量 ? 才 被 广大 业者 重视 起 来 。 对 软件 测试 的 定义 也 发 
生 了 改变 ,软件 测试 不 单纯 是 一 个 发 现 错误 的 过 程 ,而 且 包 含 对 软件 质量 评价 的 内 容 。 软 件 开 
发 人 员 和 测试 人 员 开始 坐 在 一 起 探讨 软件 工程 和 测试 问题 。 制 定 了 各 类 标准 ,包括 IEEE 标 
准 、 美 国 ANSI(American National Standard Institute) 标 准 以 及 ISO(CInternational Standard 
Organization) 国 际 标准 。1983 年 , Bill Hetzel 在 《软件 测试 完全 指南 》(CComplete Guide of 
Software Testing) 一 书 中 指出 :“ 测 试 是 以 评价 一 个 程序 或 者 系统 属性 为 目标 的 任何 一 种 活 
动 ,测试 是 对 软件 质量 的 度量 ”"。Myers 和 Hetzel 的 定义 至 今 仍 被 引用 。 

20 世纪 90 年 代 , 由 于 软件 的 复杂 性 提高 .对 软件 质量 的 要 求 越 来 越 严 格 、 软 件 测试 技术 
的 发 展 , 采 用 手工 测试 不 但 测试 不 完整 且 耗 费 大 量 的 人 力 和 物力 等 原因 ,各 种 测试 工具 应 运 而 
生 , 这 是 软件 测试 在 技术 上 和 手段 上 的 一 大 进步 。 到 了 2002 年 ,Rick 和 Stefan 在 《系统 的 软 
件 测试 》(Systematic Software Testing) 一 书 中 对 软件 测试 做 了 更 进一步 定义 :“ 测 试 是 为 了 
度量 和 提高 被 测 软 件 的 质量 ,软件 测试 是 贯穿 工程 设计 、 实 施 和 维护 整个 生命 周期 的 过 程 ”。 
这 些 经 典 论著 对 软件 测试 研究 的 理论 化 和 体系 化 产生 了 巨大 的 影响 。 

总 之 , 近 20 年 来 , 随 着 计算 机 和 软件 技术 的 飞速 发 展 ,软件 测试 技术 的 研究 也 取得 了 很 大 
的 突破 ,测试 专家 总 结 出 了 一 些 很 好 的 测试 模型 ,比如 著名 的 V 模型 、W 模型 等 ,在 测试 过 程 
改进 方面 提出 了 TMM(Testing Maturity Model) 的 概念 ,在 单元 测试 、 集 成 测试 、 系 统 测试 、 
负载 压力 测试 以 及 测试 管理 等 方面 涌现 出 了 大 量 优秀 的 软件 测试 工具 。 


虽然 软件 测试 技术 发 展 很 快 .但 是 其 发 展 速度 仍 落后 于 软件 开发 技术 ,这 使 得 软件 测试 目 
前 面临 着 很 大 的 挑战 ,主要 体现 在 以 下 8 个 方面 : 

(1) 软件 在 国防 现代 化 、 社 会 信息 化 和 国民 经 济 信息 化 领域 中 的 作用 越 来 越 重 要 ,已 经 渗 
透 到 我 们 生活 的 方方面面 ,对 软件 质量 的 要 求 越 来 越 高 ,由 此 产生 的 测试 任务 越 来 越 繁重 。 

(2) 软件 规模 越 来 越 大 ,功能 越 来 越 复杂 ,网 络 化 使 系统 越 来 越 复杂 ,如 何 进行 充分 而 有 
效 的 测试 成 为 难题 。 

(3) 面向 对 象 的 开发 技术 越 来 越 普及 ,但 是 面向 对 象 的 测试 技术 发 展 缓慢 。 

(4) 对 于 分 布 式 系统 整体 性 能 是 否 能 进行 有 效 的 测试 ,是 否 能 方便 地 定位 性 能 的 瓶颈 
所 在 。 

(5) 对 于 实时 系统 来 说 ,缺乏 有 效 的 测试 手段 。 

(6) 随 着 安全 问题 的 日 益 突出 ,信息 系统 的 安全 性 如 何 进行 有 效 的 测试 与 评估 成 为 世界 
性 的 难题 。 

(7) 嵌入 式 系统 的 测试 面临 诸多 挑战 。 

(8) 软件 测试 和 软件 开发 的 分 析 、 设 计 和 coding 过 程 不 能 很 好 地 集成 。 软 件 测试 更 多 的 
是 一 个 单独 的 活动 ,影响 测试 的 效果 和 效率 。 

在 软件 业 比较 发 达 的 国家 ,特别 是 美国 ,软件 测试 已 经 发 展 成 为 一 个 独立 的 产业 ,而 在 我 
国 软件 测试 产业 刚刚 起 步 ,主要 体现 在 以 下 3 个 方面 。 

(1) 软件 测试 在 软件 公司 中 占有 重要 的 地 位 。 比 尔 。 盖 茨 曾 在 马萨诸塞 州 技术 学 院 的 一 
次 演讲 中 说 ,:“ 在 微软 ,一 个 典型 的 开发 项 目 组 中 测试 工程 师 要 比 编码 工程 师 多 得 多 ,可 以 说 
我 们 花费 在 测试 上 的 时 间 要 比 花费 在 编码 上 的 时 间 多 得 多 。” 

(2) 软件 测试 理论 研究 莲 勃 发 展 ,每 年 举办 各 种 各 样 的 测试 技术 年 会 ,发 表 了 大 量 的 软件 
测试 研究 论文 ,引领 了 软件 测试 理论 研究 的 国际 潮流 。 

(3) 软件 测试 市 场 繁荣 。 美 国有 一 些 专业 公司 开发 软件 测试 标准 与 测试 工具 , HP、 
Compuware、McCabe 和 IBM Rational 等 都 是 著名 的 软件 测试 工具 提供 商 , 它 们 出 品 的 测试 工 
具 已 经 占领 了 国际 市 场 。 目 前 我 国 使 用 的 主流 测试 工具 大 部 分 是 国外 的 产品 ,而 且 在 世界 各 
地 都 可 以 看 到 它们 出 品 的 软件 测试 工具 ,除了 商业 化 的 测试 工具 外 ,还 有 大 量 的 开源 的 软件 测 
试 工具 ,可 见 , 国 外 的 软件 测试 已 经 形成 了 较 大 的 产业 。 

中 国 的 软件 测试 技术 研究 起 步 于 20 世纪 80 年 代 , 主 要 是 随 着 软件 工程 的 研究 而 逐步 发 
展 起 来 的 ,由 于 起 步 较 晚 ,与 国际 先进 水 平 相 比 差距 较 大 。 因 此 ,我 国 无 论 是 在 软件 测试 理论 
研究 还 是 在 测试 实践 上 ,和 国外 发 达 国 家 都 有 不 少 的 差距 ,主要 体现 在 对 软件 产品 化 测试 的 技 
术 研 究 还 比较 贫乏 ,从 业 人 员 较 少 ,测试 服务 没有 形成 足够 的 规模 等 方面 。 但 是 , 随 着 我 国 软 
件 产业 的 蓬勃 发 展 以 及 对 软件 质量 的 重视 ,软件 测试 也 越 来 越 被 人 们 所 看 重 , 软 件 测试 正在 逐 
步 成 为 一 个 新 兴 的 产业 。 我 国正 在 迈 入 测试 时 代 , 主 要 体现 在 以 下 7 个 方面 : 

(1) 国内 较 大 的 软件 公司 都 已 经 或 者 正在 建立 独立 的 专职 软件 测试 队伍 ,虽然 测试 人 员 
规模 以 及 所 占 比例 还 不 能 和 国外 的 大 公司 相 比 ,但 是 毕竟 在 公司 内 部 贯彻 了 独立 测试 的 意识 。 

(2) 国家 有 关 管 理 部 门 出 台 了 相关 政策 ,加 强 了 对 软件 测试 职业 的 认证 和 培训 。 

(3) 国际 著名 的 软件 测试 机 构 和 组 织 在 中 国 设立 分 支 机 构 , 有 利于 中 国 软件 测试 技术 和 
际 接轨 。 

(4) 国家 实行 了 软件 产品 登记 认证 制度 ,规定 凡是 在 我 国境 内 销售 的 产品 必须 到 相关 部 
] 备 案 登 记 , 而 且 要 经 过 登记 测试 。 


(5) 国家 相关 部 门 通过 软件 测试 对 软件 产品 进行 质量 监督 抽查 。 

(6) 国家 的 测试 行业 规范 初步 形成 。 

(7) 用 户 对 软件 质量 要 求 越 来 越 高 ,信息 系统 验收 不 再 走过场 ,而 要 通过 第 三 方 测试 机 构 
的 严格 测试 来 判定 。 

“以 测 代 评 ”正在 成 为 我 国 科技 项 目 择优 支持 的 一 项 重要 举措 ,比如 ,国家 “863” 计 划 对 数 
据 库 管 理 系统 、 操 作 系统 ,办 公 软 件 .ERP 等 项 目的 经 费 支 持 都 是 通过 第 三 方 测试 机 构 科 学 客 
观 的 测试 结果 来 决定 的 。 

软件 测试 在 计算 机 类 的 专业 领域 已 经 成 为 一 门 独立 课程 ,对 我 国 软件 测试 人 才 的 培养 起 
到 了 很 好 的 作用 。 

第 三 方 测试 机 构 得 到 了 蓬勃 的 发 展 。 最 近 两 年 ,在 全 国 各 地 ,尤其 是 国内 的 大 中 城市 成 立 
了 多 家 软件 测试 机 构 ,测试 服务 体系 已 经 基本 确立 。 国 内 软件 企业 测试 组 织 和 测试 过 程 管理 
及 控制 也 逐渐 规范 。 

总 之 ,我 国 的 软件 测试 行业 正 处 于 一 个 不 断 发 展 、 完 善 和 走向 成 熟 的 阶段 ,经 过 这 些 年 的 
发 展 ,我 们 已 经 大 大 缩小 了 与 国外 发 达 国 家 的 差距 ,也 推动 了 整个 软件 行业 的 发 展 。 


1.2.2 软件 测试 的 发 展 趋势 


从 目前 国内 外 软件 测试 的 发 展现 状 来 分 析 , 可 以 看 到 软件 测试 的 总 体 发 展 趋势 。 

软件 测试 工作 不 仅 是 软件 开发 过 程 中 的 某 一 阶段 或 某 几 个 阶段 的 任务 ,而 且 是 贯穿 于 整 
个 软件 开发 的 全 过 程 。 也 就 是 说 ,软件 测试 不 仅仅 是 单元 测试 、 集 成 测试 、 系 统 测试 和 验收 测 
试 等 动态 测试 工作 ,同时 ,也 需要 对 需求 的 精确 性 和 完整 性 做 测试 ,需要 对 需求 分 析 和 设计 的 
规约 做 测试 等 ,这 些 测试 称 为 静态 测试 ,静态 测试 将 在 测试 领域 起 到 重要 的 作用 。 

在 软件 开发 过 程 中 ,软件 架构 师 、 软 件 开发 工程 师 .QA 人 员 ,测试 工程 师 将 进行 更 好 的 融 
合 , 测 试 与 软件 开发 过 程 中 的 分 析 设计、 编码 等 工作 集成 度 越 来 越 高 。 他 们 相互 之 间 要 通过 
某 种 机 制 做 到 互通 有 无 ,而 不 是 相互 对 立 的 关系 ,因为 他 们 的 工作 可 以 相互 借鉴 ,相互 促进 。 
同时 ,软件 测试 工程 师 应 该 尽早 地 介入 到 整个 软件 开发 过 程 中 去 。 比 如 ,在 软件 定义 阶段 , 软 
件 测试 人 员 的 介入 可 以 从 测试 人 员 的 角度 对 需求 提出 一 些 问题 ,使 需求 更 加 完善 , 当 需 求 完 成 
后 ,测试 人 员 可 以 基于 需求 进行 系统 级 别 的 测试 用 例 的 分 析 和 设计 。 

软件 测试 工程 师 在 软件 开发 过 程 中 的 地 位 越 来 越 重 要 ,测试 职业 得 到 了 充分 的 尊重 。 测 
试 工程 师 和 开发 工程 师 不 是 矛盾 体 ,是 相互 协调 的 统一 体 ,共同 的 目标 是 提高 软件 质量 。 在 整 
个 软件 开发 周期 ,软件 测试 工程 师 提 供 的 是 一 种 至 关 重 要 的 服务 ,是 形成 开发 过 程 里 程 碑 的 重 
要 支撑 ,测试 工程 师 的 价值 得 到 充分 认识 。 曾 经 认为 “如 果 你 没有 能 力 做 开发 或 开发 能 力 差 ， 
那么 就 去 做 测试 吧 ”, 这 种 观点 将 被 握 弃 ,而 现实 情况 是 “只 有 高 水 平 的 开发 者 ,具有 丰富 的 业 
界 经 验 的 技术 人 员 才 能 胜任 测试 工作 ”。 

另外 ,在 软件 企业 内 部 设置 软件 测试 部 门 越 来 越 成 为 一 种 共识 。 

由 于 软件 系统 越 来 越 庞大 、 越 来 越 复杂 ,软件 系统 的 各 种 外 部 接口 增多 ,给 软件 测试 带 来 
挑战 ,所 以 ,软件 测试 工具 的 使 用 在 软件 测试 中 起 到 重要 的 作用 。 同 时 ,测试 工具 能 与 其 他 开 
发 过 程 工 具 之 间 做 到 很 好 的 集成 ,达到 不 同 工 具 间 的 信息 数据 共享 。 

随 着 软件 外 包 的 发 展 ,软件 测试 外 包 服 务 也 将 快速 增长 。 和 软件 开发 外 包 一 样 ,软件 测试 
外 包 将 成 为 全 球 化 的 一 种 趋势 。 在 国内 已 经 有 多 家 专门 的 软件 测试 企业 诞生 ,这 些 企业 可 以 
提供 不 同 的 软件 测试 服务 ,充分 利用 这 些 职业 的 测试 企业 提供 的 测试 专家 队伍 为 自己 的 软件 


产品 进行 全 程 测试 ,不 但 可 以 保证 软件 的 质量 ,而 且 可 以 节省 测试 成 本 。 


1.3 ”软件 测试 和 软件 质量 


1.3.1 什么 是 软件 测试 


“测试 ”这 种 术语 早先 出 现在 工业 制造 、 加 工 等 行业 的 生产 中 ,测试 被 当做 一 个 常规 的 检验 
产品 质量 的 一 种 手段 。 测 试 的 含义 为 “以 检验 产品 是 否 满足 需求 为 目标 ”。 而 软件 测试 活动 除 
检验 软件 是 否 满足 需要 外 ,还 包括 了 一 个 重要 的 任务 , 即 发 现 软件 的 缺陷 。 

“软件 测试 ”的 经 典 定义 是 : 在 规定 条 件 下 对 软件 进行 操作 ,以 发 现 错误 ,对 软件 质量 进行 
评估 。 我 们 知道 ,软件 是 由 文档 \ 数 据 以 及 程序 组 成 的 ,其 中 ,程序 是 按照 事先 设计 的 功能 和 性 
能 等 要 求 执行 的 指令 序列 ; 数据 是 程序 能 正常 操纵 信息 的 数据 结构 ; 文档 是 与 程序 开发 维护 
和 使 用 有 关 的 各 种 图 文 资料 。 那 么 软件 测试 就 应 该 是 对 软件 开发 过 程 中 形成 的 文档 、 数 据 以 
及 程序 进行 的 测试 ,而 不 仅仅 是 对 程序 进行 的 测试 。 软 件 测试 并 非 是 简单 的 “ 挑 错 ”, 而 是 贯穿 
于 软件 开发 过 程 的 始终 ,是 一 套 完善 的 质量 管理 体系 ,这 就 要 求 测试 工程 师 应 该 具有 系统 的 测 
试 专业 知识 及 对 软件 的 整体 把 握 能 力 。 

随 着 人 们 对 软件 工程 化 的 重视 和 提高 以 及 软件 规模 的 日 益 扩 大 ,软件 分 析 、` 设 计 的 作用 越 
来 越 突 出 ,而 且 有 资料 表明 ,60% 以 上 的 软件 缺陷 并 不 是 程序 引起 的 ,而 是 分 析 和 设计 引起 的 。 
因此 ,做 好 软件 分 析 和 设计 阶段 的 测试 工作 就 显得 非常 重要 。 这 就 是 我 们 提倡 的 测试 概念 扩 
大 化 ,提倡 软件 全 生命 周期 测试 的 理念 。 

软件 测试 是 为 软件 开发 过 程 服务 的 ,在 整个 软件 开发 过 程 中 ,要 强调 测试 服务 的 概念 。 虽 
然 软 件 测试 的 一 个 重要 任务 是 为 了 发 现 软件 中 存在 的 缺陷 ,但 是 ,其 根本 是 为 了 提高 软件 质 
量 , 降 低 软 件 开发 过 程 的 风险 。 软 件 的 质量 风险 可 以 归纳 为 两 个 方面 : 内 部 风险 和 外 部 风险 。 
内 部 风险 是 软件 开发 商 在 即将 发 布 的 时 候 发 现 软 件 有 严重 的 缺陷 ,从 而 延迟 发 布 日 期 ,违背 合 
同 ,失去 信誉 或 失去 更 多 的 市 场 机 会 ; 外 部 风险 是 软件 发 布 之 后 用 户 发 现 了 不 能 容忍 的 缺陷 ， 
引起 索赔 等 各 种 法 律 纠纷 ,最 后 可 能 导致 开发 和 用 于 客户 支持 的 费用 上 升 、 软 件 系统 不 能 通过 
验收 等 结果 。 

软件 测试 只 能 证 明 软 件 存在 缺陷 ,而 不 能 证 明 软 件 没有 缺陷 。 软 件 企业 对 软件 开发 的 期 
望 是 在 预计 的 时 间 合理 的 预算 下 ,提交 一 个 可 以 交付 使 用 的 软件 产品 。 软 件 测试 的 目的 就 是 
把 软件 的 缺陷 控制 在 一 个 可 以 进行 软件 系统 交付 /发 布 的 程度 上 ,可 以 交付 /发 布 的 软件 系统 
并 不 是 其 不 存在 任何 缺陷 ,而 是 对 于 软件 系统 而 言 , 没 有 主要 的 缺陷 或 者 说 没有 影响 业务 正常 
进行 的 缺陷 ,因此 软件 测试 不 可 能 无 休止 地 进行 下 去 ,而 是 要 把 缺陷 控制 在 一 个 合理 的 范围 之 
内 ,因为 软件 测试 也 是 需要 花费 巨大 成 本 的 。 有 资料 表明 ,波音 777 整体 设计 费用 的 25% 都 
花 在 了 软件 程序 的 判断 和 条 件 覆 盖 测 试 上 ,判断 和 条 件 覆 盖 测 试 是 白 盒 测 试 方法 的 一 种 ,将 在 
后 面 论述 。 对 于 测试 而 言 , 随 着 测试 时 间 的 延伸 和 深入 ,发 现 缺陷 的 成 本 会 越 来 越 高 ,这 就 需 
要 测试 有 度 ,而 这 个 度 并 不 是 由 项 目 计 划 的 时 间 来 判断 ,而 是 要 根据 测试 的 结果 出 现 缺 陷 的 严 
重 性 、 缺 陷 的 多 少 及 发 生 的 概率 等 多 方面 来 分 析 。 这 也 要 求 在 项 目 计 划 时 , 要 给 软件 测试 留 出 
足够 的 时 间 和 经 费 , 仓 促 的 测试 或 者 由 于 项 目 提 交 计 划 的 压力 而 终止 测试 ,最 后 的 软件 系统 的 
质量 就 不 能 得 到 保证 ,结果 可 能 会 造成 无 法 估计 的 损失 。 

软件 测试 有 两 个 基本 职责 , 即 验证 (verification) 和 确认 (validation)。Schulmeyer 和 
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Mackenziee(2000) 对 验证 和 确认 所 做 的 定义 是 : 
验证 : 保证 软件 开发 过 程 中 某 一 具体 阶段 的 工作 产品 与 该 阶段 和 前 一 阶段 的 需求 的 一 
致 性 。 
确认 : 保证 最 终 得 到 的 产品 满足 系统 需求 。 


1.3.2 什么 是 软件 质量 


1991 年 ,软件 产品 质量 评价 国际 标准 ISO 9126 中 定义 的 “软件 质量 ”是 软件 满足 规定 的 
或 潜在 用 户 需求 特性 的 总 和 。 到 1999 年 ,软件 “产品 评价 ”国际 标准 ISO 14598 经 典 的 “软件 
质量 "定义 是 软件 特性 的 总 和 ,软件 满足 规定 或 潜在 用 户 需求 的 能 力 。 

一 般 对 “质量 ”的 理解 是 一 个 实体 的 “属性 ”, “属性 ”好 就 是 质量 好 。 但 是 这 不 够 全 面 ,“ 属 
性 ”是 内 在 特性 ,内 在 特性 好 ,不 一 定 就 能 胜任 和 完成 好 用 户 的 各 种 任务 。 因 此 ,软件 质量 也 是 
关于 软件 特性 具备 "能力 ” 的 体现 。 

2001 年 ,软件 “产品 质量 ”国际 标准 化 组 织 修订 了 ISO/IEC 9126 一 1991, 提 出 了 一 套 新 的 
9126 系列 标准 , 即 ISO/VIEC 9126-1、-2、-3 和 -4。ISO 9126 定义 的 软件 质量 包括 “内 部 质量 ”、 
“外 部 质量 ”和 “使 用 质量 ”三 部 分 。 也 就 是 说 ,“ 软 件 满足 规定 或 潜在 用 户 需 求 的 能 力 ” 要 从 软 
件 在 内 部 、 外 部 和 使 用 中 的 表现 来 衡量 。 

在 新 的 ISO/IEC 9126-1《 产 品质 量 -质量 模型 ) 中 ,“ 内 部 质量 ”的 定义 是 反映 软件 产品 在 规 
定 条 件 下 使 用 时 满足 需求 的 能 力 的 特性 ,被 视 为 在 软件 开发 过 程 中 (如 在 需求 分 析 、 软 件 设计 、 
编写 代码 阶段 ) 产 生 的 中 间 软 件 产品 的 质量 。 了 解 软件 产品 的 内 部 质量 ,可 以 预计 最 终 产 品 的 
质量 。 外 部 质量 的 定义 是 软件 产品 在 规定 条 件 下 使 用 时 满足 需求 的 程度 。 外 部 质量 被 视 为 在 
预订 的 系统 环境 中 运行 时 可 能 达到 的 质量 水 平 。 使 用 质量 的 定义 是 在 规定 的 使 用 环境 下 软件 
产品 使 特定 用 户 在 达到 规定 目标 方面 的 能 力 。 它 反映 的 是 从 用 户 角度 看 到 的 软件 产品 在 适当 
系统 环境 下 满足 其 需求 的 程度 。 内 部 质量 、 外 部 质量 和 使 用 质量 之 间 的 关系 如 图 1-10 所 示 。 
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图 1-10 软件 内 部 、 外 部 和 使 用 质量 的 关系 


用 户 对 质量 的 需求 可 以 用 使 用 质量 、 外 部 质量 和 内 部 质量 等 质量 要 求 来 反映 。 使 用 质量 
可 以 用 以 下 质量 特性 表述 : 有 效 性 、 生 产 率 、 安 全 性 、 满 意 程度 。 

外 部 质量 和 内 部 质量 可 以 用 以 下 6 个 质量 特性 描述 : 功能 性 、 可 靠 性 、 易 用 性 、 效 率 、 维 护 
性 、 可 移植 性 。 


1.3.3 软件 测试 和 软件 质量 保证 的 区 别 


软件 测试 人 员 的 一 项 重要 任务 是 提高 软件 质量 ,但 不 等 于 说 软件 测试 人 员 就 是 软件 质量 
保证 人 员 ,因为 软件 测试 只 是 软件 质量 保证 工作 中 的 一 个 环节 。 软 件 质量 保证 和 软件 测试 是 
软件 质量 工程 的 两 个 不 同 层面 的 工作 。 


软件 质量 保证 (Software Quality Assurance,SQA) 的 重要 工作 是 通过 预防 (Prevention) 、 
检查 (Check) 与 改进 (Improvement) 来 保证 软件 质量 。SQA 采用 “全 面 质量 管理 ”和 “过 程 改 
进 ” 的 原理 开展 质量 保证 工作 ,所 关注 的 是 软件 质量 的 检查 与 度量 。 虽 然 在 SQA 的 活动 中 也 
有 一 些 测试 活动 ,但 所 关注 的 是 软件 质量 的 检查 与 度量 。SQA 的 工作 是 软件 生命 周期 的 管理 
以 及 验证 软件 是 否 满足 规定 的 质量 和 用 户 的 需求 ,因此 主要 着 眼 于 软件 开发 活动 中 的 过 程 、 步 
又 和 产物 (工作 产品 ) ,而 不 是 对 软件 本 身 进行 剖析 , 找 出 缺陷 和 评估 。 

软件 质量 保证 是 建立 一 套 有 计划 、 系 统 的 方法 来 保证 拟定 的 标准 、 步 又、 实践 和 方法 能 够 
正确 地 被 项 目 所 采用 。 

软件 质量 保证 的 目的 是 使 软件 过 程 对 于 管理 人 员 来 说 是 可 见 的 。 它 通过 对 软件 产品 和 活 
动 进行 评审 和 审计 来 验证 软件 是 否 合乎 标准 。 软 件 质量 保证 组 在 项 目 开 始 时 就 一 起 参与 计划 
的 建立 标准 和 过 程 的 制定 。 

软件 质量 保证 的 基本 目标 : 

。 软件 质量 保证 工作 是 有 计划 进行 的 。 

。 客观 地 验证 软件 项 目的 工作 产品 和 工作 (活动 ) 是 否 遵循 恰当 的 标准 、 步 骤 和 需求 。 

。 将 软件 质量 保证 工作 及 结果 通知 给 相关 组 别 和 个 人 。 

。 高 级 管理 层 了 解 在 软件 项 目 开 发 过 程 中 存在 的 不 能 解决 的 问题 。 

软件 质量 保证 的 工作 内 容 和 工作 方法 : 

(1) 计划 。 

针对 具体 项 目 制定 SQA 计划 ,确保 项 目 组 能 正确 执行 计划 。 制 定 SQA 计划 应 当 注 意 如 
下 几 点 : 

。 有 重点 。 依 据 企业 目标 以 及 项 目 情况 确定 审计 的 重点 。 

。 明确 审计 内 容 。 明 确 审计 哪些 活动 ,哪些 产品 。 

。 明确 审计 方式 。 确 定 怎样 进行 审计 。 

。 明确 审计 结果 报告 的 规则 。 审 计 的 结果 报告 给 谁 。 

(2) 审计 。 

依据 SQA 计划 进行 SQA 审计 工作 ,按照 规则 发 布 审计 结果 报告 。 注 意 ,审计 一 定 要 有 
项 目 组 人 员 陪 同 , 不 能 搞 突然 袭击 。 双 方 要 开 诚 布 公 , 坦 诚 相 对 。 审 计 的 内 容 是 确认 是 否 按照 
过 程 要 求 执行 了 相应 活动 ,是 否 按 照 过 程 要 求 产生 了 相应 工作 产品 。 

(3) 问题 跟踪 。 

对 审计 中 发 现 的 问题 ,要 求 项 目 组 改进 ,并 跟踪 直到 解决 。 

软件 测试 虽然 也 与 开发 过 程 紧密 相关 ,但 关心 的 不 是 过 程 的 活动 ,而 是 对 过 程 的 产物 或 开 
发 出 的 软件 工作 产品 进行 剖析 。 测 试 人 员 要 “执行 ”软件 ,对 过 程 中 的 产物 (开发 的 文档 和 源 代 
码 ) 进 行 评审 、 走 查 及 执行 软件 等 活动 ,以 找 出 缺陷 ,评估 并 报告 质量 情况 。 测 试 人 员 必 须 假设 
软件 存在 潜在 的 错误 或 缺陷 ,测试 中 所 做 的 操作 是 为 了 找 出 更 多 的 错误 或 缺陷 ,而 不 仅仅 是 为 
了 验证 每 一 个 功能 或 业务 是 否 是 正确 的 。 软 件 测试 有 不 同 的 级 别 , 如 单元 测试 、 集 成 测试 、 系 
统 测试 等 。 对 测试 中 发 现 的 错误 或 缺陷 的 分 析 、 追 踪 并 进行 回归 测试 (在 后 面 章 节 定 义 ) 也 是 
软件 测试 中 的 重要 工作 ,因此 软件 测试 是 保证 软件 质量 的 一 个 重要 环节 。 


1.3.4 ”进行 多 少 测试 才 终 止 
对 于 一 个 计算 机 系统 或 者 一 个 子 系统 甚至 对 于 一 个 模块 想 要 进行 完全 的 测试 ,在 有 限 的 


时 间 和 资源 条 件 下 , 找 出 可 能 存在 的 所 有 错误 或 缺陷 ,使 软件 趋 于 完美 是 不 可 能 的 。 那 么 , 进 
行 多 少 测试 才 终止 ? 可 以 从 以 下 几 个 方面 考虑 : 

测试 的 时 间 用 尽 时 。 

继续 测试 没有 产生 新 失效 (failure, 由 于 缺陷 导致 软件 的 运行 不 正确 称 为 失效 ,具体 内 
容 见 1.4 节 ) 时 。 

继续 测试 没有 发 现 新 的 缺陷 时 。 

无 法 设计 出 新 的 测试 用 例 时 。 

继续 测试 回报 很 小 时 。 

达到 所 要 求 的 测试 覆盖 时 。 

所 有 已 发 现 的 错误 或 缺陷 都 已 经 被 清除 时 。 


1.4 为 什么 需要 软件 测试 


1.4.1 导致 软件 缺陷 的 原因 


在 当今 社会 ,计算 机 系统 越 来 越 成 为 人 们 生活 中 不 可 或 缺 的 一 部 分 ,包括 从 商业 应 用 ( 比 
如 银行 系统 ) 到 消费 产品 (比如 汽车 ) 的 各 个 领域 。 然 而 ,很 多 人 都 有 这 样 的 经 历 : 计算 机 系统 
并 没有 按照 人 们 的 预期 进行 工作 ,出 现 这 样 的 情况 肯定 是 计算 机 系统 出 了 问题 。 软 件 是 计算 
机 系统 重要 的 组 成 部 分 ,所 以 ,计算 机 系统 的 问题 很 大 可 能 是 系统 的 软件 不 正确 导致 的 。 软 件 
的 不 正确 可 能 会 导致 软件 执行 结果 出 现 问题 ,如 资金 .时 间 和 商业 信誉 等 出 现 误差 或 丢失 ,其 
至 导致 人 身 伤害 和 死亡 。 

导致 执行 结果 出 现 问题 ,往往 是 由 于 软件 中 的 错误 或 缺陷 引起 的 。 

人 类 会 犯错 误 (error) ,很 接近 的 英文 同义词 是 mistake, 错 误 很 可 能 扩散 ,如 需求 分 析 的 
错误 ,在 设计 期 间 可 能 被 放大 ,在 编写 代码 期 间 还 会 进一步 放大 。 缺 陷 (defect) 是 错误 的 结 
果 , 更 精确 地 说 ,缺陷 是 错误 的 表现 ,而 表现 是 表示 的 模式 ,例如 叙述 性 文字 数据 流 图 .软件 层 
次 结构 图 .代码 等 。 例 如 , 当 设计 人 员 出 现 功能 遗漏 错误 时 ,所 导致 的 缺陷 是 功能 遗漏 错误 应 
该 表现 的 内 容 。 当 缺陷 被 执行 时 会 导致 失效 (failure) 的 发 生 。 

导致 失效 的 因素 除 缺陷 外 ,还 可 能 有 辐射 电磁波、 电场 等 环境 因素 , 男 外 ,环境 污染 引起 
的 硬件 故障 也 会 导致 软件 运行 的 失效 。 

有 许多 因素 会 导致 软件 缺陷 ,主观 原因 是 人 类 在 从 事 软件 开发 过 程 中 容易 犯错 误 。 另 外 ， 
开发 过 程 管理 规范 性 、 开 发 技术 、 软 件 的 复杂 性 、 开 发 的 周期 长 短 及 个 人 能 力 等 因素 也 会 导致 
软件 缺陷 的 产生 。 


1.4.2 软件 测试 在 软件 开发 .维护 和 使 用 中 的 角色 


软件 测试 是 软件 开发 过 程 中 关键 的 质量 保证 活动 ,是 软件 质量 保证 的 一 个 环节 。 在 软件 
开发 过 程 中 实施 严格 规范 的 测试 有 助 于 发 现 软件 开发 过 程 中 不 同 阶段 的 缺陷 , 尽 可 能 地 将 缺 
陷 发 现 于 本 阶段 并 予以 纠正 ,避免 将 缺陷 带 入 下 一 个 开发 阶段 ,因为 缺陷 具有 扩展 的 特点 。 所 
以 ,在 软件 开发 过 程 中 对 文档 和 代码 的 测试 对 软件 的 质量 起 到 关键 作用 。 

在 软件 的 维护 阶段 ,由 于 软件 可 能 发 生 修改 和 功能 增强 ,因此 软件 测试 能 发 现 由 于 修改 和 
功能 增强 可 能 导致 软件 系统 出 现 的 缺陷 。 维 护 阶 段 的 测试 主要 包括 对 文档 和 软件 系统 的 


软件 在 使 用 过 程 中 可 能 由 于 硬件 升级 、 运 行 环境 变化 及 软件 退役 等 原因 出 现 各 种 问题 , 那 
么 只 有 通过 测试 才能 找到 这 些 问题 所 在 ,或 者 通过 软件 测试 模拟 或 再 现 可 能 出 现 的 问题 。 
1. 


4.3 软件 测试 心理 学 


随 着 现代 软件 工程 的 发 展 ,尤其 对 软件 质量 的 关注 ,软件 测试 的 角色 逐渐 从 开发 团队 中 独 
立 , 作 为 一 个 单独 的 小 组 ,这 样 有 利于 关注 开发 过 程 中 工作 产品 可 能 存在 的 缺陷 。 测 试 机 构 的 
独立 可 以 避免 对 工作 产品 的 作者 偏见 ,当然 独立 并 不 等 于 完全 代替 工作 产品 的 作者 ,开发 人 员 
自己 能 有 效 地 找到 其 工作 产品 中 存在 的 缺陷 。 

软件 测试 组 的 独立 可 以 有 以 下 几 种 可 能 存在 的 方式 : 

。 测试 的 分 析 和 设计 工作 由 开发 人 员 自 己 完成 ; 

。 测试 的 分 析 和 设计 由 开发 队伍 的 其 他 开发 人 员 完 

。 测试 的 分 析 和 设计 独立 于 本 项 目的 开发 队伍 ; 

。 测试 的 分 析 和 设计 独立 于 本 开发 企业 ,来 自 于 独立 的 第 三 方 测试 机 构 。 

无 论 测试 工作 是 以 哪 种 形式 存在 ,测试 人 员 发 现 软件 工作 产品 的 缺陷 某 种 程度 上 是 对 工 
作 产 品 和 其 作者 的 批评 ,所 以 软件 测试 常常 被 看 做 一 种 消极 的 活动 ,尽管 软件 测试 对 软件 开发 
的 风险 具有 很 强 的 规避 作用 。 

作为 一 个 软件 测试 员 ,首先 应 该 具有 全 面 的 软件 测试 技术 ,对 所 测试 的 系统 应 该 具有 好 奇 
心 `. 职 业 翡 观 心态 .批评 的 眼光 及 关注 系统 的 细节 的 能 力 。 另 外 ,和 开发 人 员 有 效 的 沟通 及 软 
件 测试 的 经 验 ( 测 试 技术 的 运用 能 力 `, 业 务 的 理解 程度 及 对 问题 猜测 的 经 验 等 ) 也 非常 重要 。 

如 果 测 试 人 员 同 分 析 、 设 计 和 代码 开发 人 员 能 进行 很 好 的 建设 性 的 沟通 ,那么 对 测试 过 程 
中 发 现 的 缺陷 的 理解 则 更 容易 ,开发 人 员 和 测试 人 员 之 间 的 不 好 感 将 避免 。 另 一 方面 ,软件 工 
作 产品 的 缺陷 信息 有 助 于 提高 开发 者 的 技能 ,也 为 开发 过 程 节约 成 本 和 时 间 , 降 低 软件 开发 
风险 。 

另外 ,测试 经 理 和 测试 人 员 之 间 也 应 该 具有 好 的 沟通 ,通过 规范 的 交流 途径 交流 测试 中 的 
缺陷 信息 、 进 展 情况 和 风险 。 例 如 ,将 测试 中 发 现 的 缺陷 通过 规范 的 流程 进行 跟踪 管理 并 通过 
缺陷 管理 工具 来 支撑 就 是 一 种 很 好 的 方式 ,使 得 测试 人 员 发 现 缺 陷 时 和 开发 人 员 的 沟通 都 是 
通过 规范 的 流程 实现 。 

如 果 测 试 人 员 把 自己 发 现 缺陷 作为 一 个 新 闻 来 传播 ,那么 会 给 沟通 带 来 麻烦 。 有 几 种 方 
式 可 以 提高 和 改善 测试 人 员 与 其 他 人 员 之 间 的 关系 : 

。 一 开始 就 采取 合作 的 方式 而 非 斗 争 ,使 大 家 知道 好 的 软件 质量 是 共同 的 目标 ; 

。 对 所 发 现 的 可 能 的 缺陷 以 一 种 中 立 、 就 事 论 事 的 方式 ,而 非 一 种 批评 的 口吻 与 作者 进 

行 沟通 ; 
。 了解 他 人 对 该 缺陷 的 态度 ， 
。 共同 确定 问题 的 存在 性 。 


1.5 软件 测试 的 目的 


软件 测试 人 员 在 做 测试 工作 之 前 必须 首先 明确 测试 目的 才能 够 更 好 地 完成 测试 工作 。 很 
多 人 认为 软件 测试 的 目的 是 验证 软件 ,那么 这 种 说 法 对 吗 ? 显然 是 错误 的 ,至 少 是 不 完整 的 。 


_ 第 1 章 软件 测试 基础 知识 

前 面 讲 过 一 般 不 可 能 对 软件 进行 完全 的 测试 ,因为 软件 系统 可 能 存在 数量 庞大 的 路 径 , 这 
些 路 径 很 难 穷尽 ,那么 在 没 测试 到 的 数 十 种 或 数 十 亿 种 情况 里 面 就 可 能 隐藏 着 各 种 缺陷 ,因此 
不 能 证 明 软 件 运行 不 会 出 现任 何 差错 。 

有 研究 表明 ,发 现 并 纠正 软件 中 缺陷 的 费用 可 能 占 整个 开发 费用 的 40% 一 80%。 因 
此 ,软件 企业 投入 大 量 的 资金 不 仅仅 是 为 了 “验证 软件 正确 运行 ”而 是 要 找 出 导致 软件 无 
法 正确 运行 的 在 软件 中 存在 的 大 量 缺 陷 。 无 论 如 何 , 软 件 开发 完成 时 都 会 遗留 没有 被 发 现 
的 缺陷 。 如 果 测 试 人 员 不 能 验证 软件 是 否 能 够 正确 地 工作 ,那么 就 认为 测试 就 是 失败 的 ? 
当 测试 人 员 发 现 软件 中 有 很 多 缺陷 时 ,他 所 做 的 工作 究竟 是 好 还 是 坏 呢 ? 显然 ,我 们 把 验 
证 软件 能 否 正确 运行 作为 测试 目的 是 不 正确 的 。 我 们 有 时 会 发 现 这 种 场景 : 项 目的 交付 时 
间或 项 目的 上 线 时 间 很 快 就 到 了 ,而 测试 人 员 在 做 系统 级 别 的 测试 时 仍 不 断 地 发 现 软件 中 的 
缺陷 ,这 时 ,有 的 开发 人 员 其 至 会 认为 软件 测试 人 员 过 于 严格 了 。 测 试 人 员 不 应 该 为 了 发 现 缺 
陷 而 工作 ,这 种 想法 显然 是 不 正确 的 ,测试 的 目的 之 一 就 是 为 了 在 软件 发 布 之 前 发 现 软件 缺 
陷 , 从 而 提高 软件 质量 。 事 实 上 情况 也 只 有 这 样 , 质 量 提高 了 ,软件 开发 企业 才能 在 激烈 的 市 
场 竞 争 中 立 于 不 败 之 地 。 测 试 人 员 如 果 认 为 测试 工作 就 是 要 找 出 缺陷 ,就 会 更 加 卖力 地 寻找 
缺陷 (Myers,1979) 。 在 心理 学 研究 中 有 个 经 典 的 发 现 : 人 总 是 容易 看 到 自己 想 看 的 东西 。 例 
如 ,校对 工作 总 是 很 难 做 的 ,因为 你 总 是 想 看 到 拼写 正确 的 单词 ,所 以 大 脑 就 会 自动 地 更 正 拼 
写 错 误 的 单词 。 

在 软件 测试 中 ,如 果 找 到 缺陷 测试 人 员 能 够 得 到 表彰 或 奖赏 ,测试 人 员 也 许 能 够 找到 更 多 
的 缺陷 ,甚至 会 有 一 些 “ 误 报 ”, 或 将 发 现 的 缺陷 严重 性 扩大 化 。 相 反 , 如 果 测 试 人 员 为 了 避免 
开发 人 员 对 其 发 现 问题 的 抱怨 ,或 为 了 避免 因为 “ 误 报 "” 而 受到 惩罚 的 情况 发 生 ,总 是 希望 程序 
能 正确 运行 ,这 样 会 遗漏 掉 软 件 中 可 能 存在 的 许多 真正 缺陷 。 还 有 研究 发 现 , 即 使 是 训练 有 素 
的 、 认 真 的 .聪明 的 测试 人 员 也 会 无 意识 地 偏爱 自己 所 做 的 测试 ,避免 做 那些 可 能 会 给 自己 的 
设想 带 来 麻烦 的 测试 、 错 误 分 析 和 错误 解释 等 ,甚至 会 忽视 那些 证 明 自己 观点 错误 的 测试 结论 
(Rosenthal 1966) 。 

测试 人 员 应 该 能 认识 到 测试 的 任务 就 是 证 明 软 件 可 能 存在 这 样 或 那样 的 缺陷 ,因此 测试 
工程 师 对 软件 的 测试 应 该 采取 破坏 性 的 姿态 , 想 办 法 让 软件 出 问题 ,设计 出 的 测试 用 例 要 具有 
针对 性 ,目的 就 是 找 出 可 能 存在 的 缺陷 。 虽 然 这 种 态度 有 点 苛刻 ,但 这 是 十 分 必要 的 。 因 为 测 
试 一 个 软件 的 目的 就 是 为 了 发 现 它 的 缺陷 ,发 现 的 缺陷 越 多 越 严重 越 好 。 如 果 由 于 时 间 不 充 
足 , 无 法 运行 完 所 有 测试 用 例 ,那么 有 效 地 利用 可 用 的 时 间 就 显得 相当 重要 ,要 保证 所 有 的 基 
本 的 、 常 用 的 业务 流 中 的 缺陷 能 够 暴露 ,不 能 暴露 缺陷 的 测试 就 是 浪费 时 间 。Myers(1979) 做 
了 一 个 比喻 ,假设 你 病 了 ,去 看 医生 ,他 应 该 给 你 做 检查 , 找 出 哪里 有 病 , 然 后 推荐 治疗 措施 。 
但 他 不 停 地 检查 ,检查 到 最 后 他 什么 问题 也 没 发 现 , 那 么 他 究 竞 是 一 个 出 色 的 检查 人 员 还 是 一 
个 不 称职 的 大 夫 呢 ? 如 果 你 真 的 有 病 , 他 就 是 不 称职 的 。 之 前 所 做 的 检查 纯粹 是 浪费 时 间 、 金 
钱 和 精力 。 对 于 软件 而 言 ,你 就 是 那个 大 夫 ,软件 就 是 那个 有 病 的 患者 。 

总 而 言 之 ,软件 测试 真正 的 作用 是 通过 软件 测试 而 发 现 软件 缺陷 、 分 析 其 原因 并 进行 度量 
分 析 , 从 而 确保 软件 产品 的 质量 。 所 以 ,测试 并 不 仅仅 是 为 了 要 找 出 缺陷 。 通 过 分 析 缺 陷 产 生 
的 原因 和 缺陷 的 分 布 特征 ,可 以 帮助 项 目 管理 者 或 测试 人 员 改 进 其 工作 。 同 时 ,这 种 分 析 也 能 
帮助 我 们 设计 出 有 针对 性 的 测试 方法 ,改善 测试 的 有 效 性 。 虽 然 在 测试 时 ,对 软件 采取 的 是 破 
坏 性 的 态度 ,但 从 长 远 的 角度 来 看 ,这 种 工作 是 具有 建设 性 意义 的 。 发 现 缺 陷 、 修 改 缺陷 的 过 
程 会 使 软件 变 得 更 为 强壮 。 如 果 某 个 软件 经 过 了 多 次 测试 都 没有 发 现 缺 陷 , 那 么 必须 慎重 考 


虑 这 项 测试 计划 。 另 一 方面 ,没有 发 现 缺 陷 的 测试 也 是 有 价值 的 ,是 评定 测试 质量 的 一 种 方 
法 。 详 细 而 严谨 的 可 靠 性 增长 模型 可 以 证 明 这 一 点 。 例 如 Bev Littlewood 发 现 一 个 经 过 测试 而 
正常 运行 了 小 时 的 系统 有 继续 正常 运行 n 小 时 的 概率 。Myers 在 The Ar of Software 
Testing 一 书 中 给 出 了 关于 测试 的 一 些 规则 ,也 可 以 把 这 些 规则 看 做 是 测试 的 目标 : 
软件 测试 是 为 了 发 现 错误 而 执行 程序 的 过 程 。 
测试 是 为 了 证 明 程序 有 错 , 而 不 是 证 明 程 序 无 错 。 
一 个 好 的 测试 用 例 在 于 它 能 发 现 至 今 未 发 现 的 错误 。 

。 一 个 成 功 的 测试 是 发 现 了 至 今 未 发 现 的 错误 的 测试 。 

在 这 里 要 强调 的 一 点 是 ,软件 测试 不 只 是 软件 测试 人 员 的 工作 ,也 是 软件 开发 人 员 和 软件 
使 用 者 的 工作 。 在 一 个 完整 的 软件 测试 过 程 中 ,需要 我 们 的 软件 测试 者 和 软件 开发 人 员 以 及 
用 户 之 间 能 够 不 断 地 交流 ,因为 软件 中 存在 的 缺陷 大 多 数 都 是 因为 开发 人 员 对 系统 需求 不 了 
解 或 者 错误 理解 了 设计 意图 而 产生 的 。 当 然 ,也 有 一 部 分 缺陷 是 开发 人 员 在 建 模 \ 编 写 代码 的 
时 候 产 生 的 。 要 解决 这 些 问 题 , 一 方面 需要 加 强 开发 人 员 、 测 试 人 员 、 客 户 之 间 的 交流 ; 另 一 
方面 ,也 需要 使 用 标准 化 的 建 模 语言 等 手段 来 明确 表达 系统 的 分 析 和 设计 意图 ,尽量 避免 缺陷 
的 引入 。 


1.6 软件 测试 的 原则 


1.6.1 所 有 的 软件 测试 都 应 追溯 到 用 户 需 求 


这 是 因为 软件 的 目的 是 使 用 户 完 成 预定 的 任务 ,并 满足 用 户 的 需求 ,而 软件 测试 所 揭示 的 
缺陷 使 软件 在 执行 过 程 中 出 现 失效 , 即 达 不 到 用 户 规定 的 需求 目标 ,满足 不 了 用 户 需求 ,所 以 ， 
软件 测试 应 该 追溯 到 用 户 需求 ,如 验收 测试 用 例 的 分 析 和 设计 就 应 该 以 需求 为 依据 。 


1.6.2 尽早 地 和 不 断 地 进行 软件 测试 


分 析 数 据 显示 ,软件 开发 过 程 中 发 现 缺 陷 的 时 间 越 晚 ,修复 它 所 花费 的 成 本 就 越 大 ,因此 
在 需求 阶段 就 应 该 有 测试 的 介入 。 因 为 软件 测试 的 对 象 不 仅仅 是 程序 编码 ,应 该 对 软件 开发 
过 程 中 产生 的 所 有 工作 产品 进行 测试 。 这 就 像 造 桥梁 一 样 ,在 图 纸 上 面 设计 好 桥梁 的 结构 之 
后 ,只 有 对 图 纸 进行 仔细 地 审查 后 才能 进行 施工 。 

IBM 的 研究 结果 还 表明 ,缺陷 存在 放大 趋势 。 例 如 ,在 需求 阶段 漏 过 的 一 个 缺陷 ,可 能 会 
因此 引起 个 设计 阶段 缺陷 。 一 般 而 言 . 不 同 阶段 值 不 同 。 经验 表 明 , 从 概要 设计 到 详细 设 
计 的 缺陷 放大 系数 大 约 为 1. 5, 从 详细 设计 到 编码 阶段 的 缺陷 放大 系数 大 约 为 3。 

由 此 可 见 , 问 题 发 现 越 早 ,解决 问题 的 代价 就 越 小 ,这 是 软件 开发 过 程 中 的 黄金 法 则 。 同 
时 ,软件 测试 也 是 一 个 不 断 地 、 持 续 地 进行 测试 的 过 程 。 持 续 不 断 地 测试 使 得 测试 形成 反复 
的 、 递 增 的 过 程 。 比 如 ,对 单元 测试 .集成 测试 或 者 系统 测试 都 会 有 一 个 反复 的 过 程 , 当 这 些 测 
试 发 现 缺 陷 并 修改 后 需要 进行 重复 测试 ,这 种 测试 一 般 用 回归 测试 来 完成 ,这 是 一 个 不 断 反复 
的 过 程 。 而 单元 测试 、 集 成 测试 和 系统 测试 本 身 就 是 一 个 递增 的 过 程 ,集成 测试 是 将 不 同 的 单 
元 集成 起 来 进行 测试 ,系统 测试 是 将 通过 集成 测试 的 软件 置 于 真实 的 环境 下 进行 测试 ,也 就 是 
说 可 能 要 增加 一 些 设备 来 进行 测试 。 这 些 测 试 每 次 使 用 的 测试 行为 和 测试 方法 不 尽 相 同 , 测 
试 软件 的 复杂 程度 和 测试 重点 也 不 同 。 总 之 ,不 断 地 测试 是 从 测试 的 完整 性 、 全 面 性 角度 出 


发 ,以 达到 测试 的 目的 。 

另外 ,由 于 软件 的 复杂 性 和 抽象 性 ,在 软件 生命 周期 各 个 阶段 都 可 能 产生 缺陷 ,所 以 不 应 
把 软件 测试 仅仅 看 作 是 软件 开发 的 一 个 独立 阶段 的 工作 ,而 应 当 把 它 贯 穿 到 软件 开发 的 各 个 
阶段 中 。 在 软件 开发 的 需求 、 分 析 和 设计 阶段 就 应 开始 测试 工作 ,编写 相应 的 测试 文档 。 同 
时 ,坚持 在 软件 开发 的 各 个 阶段 对 工作 产品 进行 静态 测试 ,如 严格 的 技术 评审 、 走 查 、 验 证 等 ， 
这 样 才能 在 开发 过 程 中 尽早 发 现 和 预防 缺陷 ,杜绝 某 些 缺 陷 ,提高 软件 质量 。 只 要 软件 测试 在 
生命 周期 中 进行 得 足够 早 ,就 能 够 提高 被 测 软 件 的 质量 ,这 就 是 预防 性 测试 的 基本 原则 。 


1.6.3 不 可 能 完全 地 测试 


想 要 进行 完全 的 测试 ,在 有 限 的 时 间 和 资源 条 件 下 找 出 所 有 的 软件 缺陷 ,使 软件 趋 于 完美 
是 不 可 能 的 。 一 些 人 存在 着 一 种 观念 ,认为 可 以 对 程序 进行 完全 的 测试 。 比 如 : 
。 一些 管理 者 或 客户 认为 存在 完全 测试 的 可 能 性 ,因此 要 求 对 软件 系统 做 完全 测试 。 
。 一 些 软 件 企 业 在 其 软件 产品 销售 说 明 中 保证 他 们 能 对 软件 进行 完全 地 测试 。 
。 一些 测试 覆盖 率 分 析 人 员 声 称 对 软件 系统 或 程序 的 所 有 业务 路 径 或 程序 路 径 达 到 了 
完全 覆盖 。 
。 一 些 测 试 人 员 相 信 存 在 着 完全 测试 ,甚至 为 实现 这 种 想法 而 不 懈 努 力 ,忍受 了 数 次 失 
败 和 挫折 ,因为 无 论 工作 得 多 么 辛 苗 , 计 划 得 多 么 周密 ,投入 的 时 间 多 长 ,人 力 和 物力 
资源 多 大 ,仍然 无 法 做 到 完全 的 测试 ,仍然 会 遗漏 缺陷 。 
不 能 进行 完全 测试 的 主要 原因 有 以 下 4 点 。 
1. 测试 所 有 可 能 输入 是 不 可 能 的 
假设 要 测试 一 个 完成 两 数 相 减 的 小 程序 。 下 面 就 来 探讨 为 什么 即使 是 这 样 的 简单 程序 ， 
测试 输入 的 数量 也 是 相当 大 的 。 对 该 程序 必须 执行 的 测试 类 型 有 : 
。 要 对 所 有 有 效 的 输入 进行 测试 。 大 多 数 的 减法 程序 都 能 接受 8 位 或 10 位 数 ,甚至 更 
多 ,怎么 对 所 有 可 能 的 输入 都 进行 测试 呢 ? 
要 对 所 有 无 效 的 输入 进行 测试 。 也 就 是 说 要 测试 能 从 键盘 上 输入 的 所 有 内 容 , 包 括 字 
母 .控制 字符 、 数 字 与 字母 的 组 合 . 过 长 的 数 .问号 等 。 只 要 能 获得 出 来 ,就 要 检查 程序 
怎么 反应 。 
对 所 有 编辑 过 的 输入 进行 测试 。 如 果 程 序 允 许 对 数据 进行 编辑 (改动 ) ,为 了 确保 编辑 
操作 一 直 能 够 正常 进行 ,就 要 将 每 一 个 数 .字母 或 别 的 任何 内 容 修改 成 其 他 任何 数 ( 或 
任何 东西 ?的 情况 进行 测试 。 接 着 ,检验 重复 的 编辑 操作 , 即 输入 数据 ,改动 ,再 改动 。 
显然 这 样 的 重复 操作 可 以 无 限 地 循环 进行 ,在 这 个 过 程 当中 就 有 可 能 发 生 下 面 的 情 
况 : 当 某 个 人 坐 在 一 台 智 能 终端 前 工作 时 . 因 故 被 打 断 ,于 是 心不在焉 地 项 键盘 , 按 一 
个 数字 键 ,然后 按 Backspace 键 ,再 次 按 数字 键 和 Backspace 键 ,重复 多 次 。 终 端 有 所 
反应 ,消除 了 屏幕 上 显示 的 数字 ,但 同时 也 将 数据 存储 到 它 的 输入 缓冲 区 。 当 他 最 后 
继续 工作 时 ,输入 一 个 数字 ,然后 按 Enter 键 , 终 端 把 所 有 的 输入 都 发 送 到 主机 ,包括 
所 有 的 数字 、Backspace 键 以 及 最 后 的 输入 。 主 机 没 想 到 终端 会 一 次 送 来 这 么 多 的 输 
入 ,于 是 它 的 输入 缓冲 区 溢出 ,系统 崩溃 。 这 是 个 真实 的 缺陷 ,很 多 系统 都 会 突然 出 现 
类 似 这 样 的 问题 , 它 由 某 些 未 曾 预料 的 输入 事件 所 引发 。 你 要 永远 对 输入 编辑 测试 下 
去 ,才能 够 确保 所 测试 的 系统 中 不 会 存在 类 似 的 问题 。 显 然 ,这 是 无 法 做 到 的 。 
。 对 所 有 输入 时 机 的 变化 情况 进行 测试 。 也 就 是 说 ,要 对 在 任意 时 间 点 上 往 程序 中 输入 


数据 时 产生 的 效果 进行 测试 ,而 不 是 等 到 计算 机 显示 出 问号 并 开始 闪 动 光标 后 才 输 入 
数据 ,要 在 它 正 显示 其 他 内 容 , 正 在 进行 减法 运算 或 正在 显示 信息 或 其 他 非常 繁忙 的 
时 候 输 入 数据 ,看 它 能 和 否 正确 处 理 。 在 很 多 系统 中 , 按 一 个 键 ,或 按 一 个 特殊 的 键 ( 如 
Enter 键 ) 都 会 产生 中 断 。 这 些 中 断 告 诉 计 算 机 应 停 下 目前 的 工作 去 读 取 输入 序列 。 
在 读 取 新 的 输入 之 后 ,计算 机 能 够 在 其 中 断 的 地 方 恢 复工 作 。 可 以 在 任意 时 刻 中 断 计 
算 机 (只 是 按 一 下 键 ), 即 在 程序 中 的 任何 位 置 中 断 计 算 机 。 为 了 充分 测试 程序 在 未 预 
料 的 时 间 点 响应 输入 的 脆弱 程度 ,最 好 在 每 一 行 代码 处 中 断 它 的 运行 ,甚至 有 时 在 同 
一 行 的 多 个 位 置 中 断 。 因 为 要 完全 地 测试 一 个 程序 ,就 必须 测试 其 对 有 效 输入 和 无 效 
输入 的 所 有 组 合 的 反应 。 另 外 ,必须 在 每 一 个 能 输入 数据 的 时 间 点 以 及 程序 在 该 时 间 
点 上 的 所 有 状态 下 测试 这 些 输入 组 合 。 所 以 说 这 些 几乎 都 是 不 可 能 的 。 既 然 可 能 的 
测试 太 多 了 ,我 们 无 法 全 部 执行 到 ,因此 也 没 必要 这 样 做 。 在 测试 过 程 中 可 以 对 4 类 
输入 (有 效 输入 .无 效 输入 ,编辑 过 的 输入 和 不 同时 间 的 输入 ) 中 的 一 种 或 几 种 输入 进 
行 测试 就 可 以 了 。 但 应 该 认识 到 ,只 要 有 任何 一 个 输入 值 没有 测试 ,就 已 经 不 是 “完全 
测试 ”。 
2. 系统 或 程序 的 所 有 路 径 不 可 能 全 部 执行 
系统 的 业务 流 路 径 或 程序 中 的 路 径 可 以 通过 不 同 的 
业务 流 或 从 程序 开始 到 程序 结束 进行 跟踪 。 就 程序 而 4 
言 ,程序 执行 了 不 同 的 语句 或 以 不 同 的 顺序 执行 相同 的 
语句 ,两 条 路 径 是 不 一 样 的 。 为 了 说 明 这 个 问题 ,下 面 举 
一 个 极其 简单 的 例子 。 首 先 分 析 图 1-11, 这 是 一 个 小 程 
序 的 程序 图 ,A 一 B 一 A 是 一 个 20 次 的 循环 ,该 循环 谋 套 
了 几 个 条 件 语 句 ,如 果 要 执行 该 程序 图 的 所 有 可 能 的 执 
行路 径 ,其 路 径 数 为 5 十 59 十 5 十 … 十 5 十 5" ,可 见 设 
计 并 执行 如 此 多 的 测试 用 例 是 不 可 能 的 。 
关于 以 上 的 分 析 , Myers 已 经 证 明 , 即 使 简单 的 程 8B 
序 , 其 路 径 的 数量 也 是 很 庞大 的 。 他 在 1979 年 描述 了 一 
个 类 似 于 图 1-11 的 只 包含 一 个 loop 循环 和 一 些 if 语句 
的 简单 程序 。 可 以 使 用 不 同 的 语言 将 其 写成 20 行 左右 ”图 1-11 一 个 有 循环 程序 的 程序 图 
的 代码 。 但 是 ,这 个 程序 有 着 100 万 亿 条 路 径 ,一 个 有 经 
验 的 优秀 测试 人 员 需 要 10 亿 年 才能 全 部 测试 完 。 当 然 ,这 些 简单 的 程序 都 是 经 过 特殊 “处 理 ” 
的 ,专门 设计 成 包含 大 量 路 径 以 证 明 他 的 理论 。 如 果 只 有 20 行 的 代码 却 具有 100 万 亿 条 路 
径 ,那么 一 个 1000 行 的 文本 编辑 器 一 个 10 000 行 的 基本 电子 制 表 软件 或 一 个 100 000 行 的 
桌面 排版 程序 中 又 会 有 多 少 执行 路 径 呢 ? 显然 数据 非常 庞大 。 
3. 需求 规格 有 缺陷 时 无 法 找 出 所 有 存在 于 分 析 和 设计 中 的 缺陷 
软件 的 需求 分 析 的 依据 是 需求 规格 说 明 书 ,如 果 规 格 说 明 书 存在 问题 或 理解 错误 将 导致 
需求 分 析 的 缺陷 ,而 需求 分 析 规 约 又 是 设计 的 基础 ,进而 又 会 导致 设计 中 的 缺陷 。 
假如 一 个 系统 或 程序 能 够 准确 地 实现 规格 说 明 的 要 求 , 则 系统 或 程序 就 是 符合 规格 说 明 
的 。 通 过 是 否 满足 规格 说 明 来 说 明 系统 或 程序 的 正确 不 尽 合理 ,如 果 规 格 说 明 上 说 “用 户 密码 
最 多 一 个 月 累计 出 错 超过 5 次 吞 卡 ”, 而 实际 上 ,系统 或 程序 实现 时 理解 为 “用 户 密码 一 天 累计 
出 错 超过 5 次 吞 卡 ”, 如 果 这 样 的 实现 是 正确 的 ,这 种 情况 下 该 怎么 办 ?这 时 系统 或 程序 是 不 


满足 规格 说 明 的 ,这 是 不 是 一 个 缺陷 ? 这 是 对 规格 说 明 的 误解 而 产生 的 缺陷 。 规 格 说 明 中 的 
有 些 缺 陷 是 偶然 的 ,有 些 是 理解 造成 的 ,还 有 的 是 故意 造成 的 。 如 果 系 统 或 程序 遵从 的 是 一 个 
不 合适 的 规格 说 明 ,我 们 就 说 它 是 有 缺陷 的 。 实 际 上 测试 者 无 法 找 出 系统 或 程序 中 所 有 的 分 
析 和 设计 缺陷 ,进而 就 无 法 完全 地 测试 它 。 

4. 不 可 能 穷尽 所 有 输出 

假如 有 一 个 网 上 飞机 订 票 系统 ,对 于 不 同 的 国家 ,不 同 的 起 始 地 点 、 目 的 地 点 .不同 的 时 间 
段 .不 同 的 乘客 类 型 可 以 组 成 一 个 庞大 的 输入 ,依据 前 面 分 析 , 穷 尽 其 测试 是 不 可 能 的 。 而 对 
于 所 有 可 能 的 输出 结果 情况 类 似 。 系 统 或 程序 的 输出 结果 一 般 包 括 合 理 的 输出 、 非 合理 的 输 
出 系统 或 程序 的 异常 等 。 就 网 上 飞机 订 票 系统 的 合理 输出 而 言 ,其 输出 结果 就 是 一 个 非常 庞 
大 的 数据 ,让 测试 用 例 覆 盖 所 有 的 输出 结果 是 不 可 能 的 。 

综 上 分 析 , 完 全 测试 和 简单 测试 都 是 不 可 取 的 ,需要 根据 实际 情况 来 决定 我 们 的 测试 程度 
和 范围 并 进行 有 效 的 控制 ,只 有 这 样 才能 更 好 地 协调 开发 与 测试 的 关系 ,投入 最 少 的 成 本 , 获 
得 最 大 的 回报 ,这 就 是 测试 工作 的 最 理想 结果 。 另 外 ,可 以 通过 详细 的 分 析 , 设 计 出 可 复 用 的 
测试 用 例 、 测 试 数据 ,构建 可 复 用 的 测试 环境 等 手段 来 达到 充分 利用 测试 资源 、 节 约 成 本 和 节 
约 测试 时 间 的 目的 。 但 无 论 测试 工作 安排 得 有 多 周密 ,都 会 遗漏 掉 部 分 缺陷 。 这 时 候 , 被 测试 
的 系统 只 有 接受 时 间 考 验 了 。 总 之 ,测试 的 宗旨 是 尽 可 能 多 地 发 现 缺陷 ,同时 应 该 发 现 所 有 严 
重 性 程度 比较 高 的 ,影响 系统 或 程序 正常 运行 的 缺陷 ,发 现 系统 或 程序 的 所 有 缺陷 是 不 可 
能 的 。 


1.6.4 增 量 测试 ,由 小 到 大 


不 同 的 模块 或 不 同 的 类 构成 一 个 子 系统 ,不 同 的 子 系统 构成 一 个 完整 的 系统 ,不 同 的 系统 
构成 一 个 更 大 的 系统 。 要 保证 这 些 不 同 程度 的 系统 质量 ,采用 由 小 到 大 的 测试 策略 是 必须 的 。 

这 里 的 由 小 到 大 的 测试 策略 指 的 是 软件 测试 的 粒度 。 无 论 是 传统 的 软件 测试 还 是 面向 对 
象 的 软件 测试 都 要 遵循 这 样 的 原则 。 因 为 只 有 这 样 , 当 缺 陷 发 生 时 我 们 才能 够 更 方便 地 对 缺 
陷 进 行 隔 离 和 定位 。 通 常 把 单元 测试 作为 软件 测试 的 最 小 粒度 。 也 就 是 说 ,只 有 当 每 个 模块 
或 类 (一 般 将 类 作为 面向 对 象 的 最 小 测试 单元 ) 都 通过 了 单元 测试 之 后 , 才 可 以 把 它们 集成 到 
一 起 进行 集成 测试 (一 般 以 概要 设计 中 的 软件 体系 结构 作为 集成 测试 的 依据 或 以 面向 对 象 分 
析 设 计 规 约 的 序列 图 等 作为 集成 的 依据 ) ,之 后 再 结合 系统 的 其 他 元 素 对 软件 进行 系统 测试 和 
确认 测试 (验收 测试 )。 随 着 测试 的 逐步 深入 ,范围 的 逐步 扩大 ,测试 时 间 、 可 用 资源 也 随 之 增 
大 。 不 难 理解 ,单元 测试 的 充分 与 否 会 影响 到 后 来 的 集成 测试 、 系 统 测试 和 验收 测试 ,对 软件 
的 整体 质量 有 直接 的 影响 ,同时 也 影响 到 软件 开发 的 时 间 长 短 和 投入 的 多 少 。 


1.6.5 避免 测试 自己 的 程序 


基于 心理 因素 ,人 们 认为 揭露 自己 软件 中 的 问题 总 不 是 一 件 愉快 的 事 , 不 愿意 否认 自己 的 
工作 。 由 于 思维 定式 ,人 们 难于 发 现 自己 的 错误 或 缺陷 。 因 此 ,为 达到 测试 目的 ,应 采取 互相 
自 测 , 由 客观 、 公 正 、 严 格 的 独立 的 测试 部 门 测试 或 者 独立 的 第 三 方 测试 机 构 进行 测试 。 

一 般 情况 下 ,程序 员 在 编写 完 每 段 编码 之 后 ,或 者 在 每 个 子 模块 或 类 完成 后 ,都 要 进行 自 
测试 (self-testing) ,这 样 就 可 以 在 早期 发 现 一 些 潜在 的 错误 或 缺陷 并 加 以 解决 。 例 如 ,微软 在 
开发 Windows XP 系统 中 就 采取 了 让 两 个 程序 员 相互 交替 检查 各 自 的 程序 的 做 法 ,以 完成 前 
期 基本 的 测试 工作 ,也 就 是 不 提倡 开发 人 员 对 自己 的 代码 进行 完整 测试 的 一 种 体现 。 这 样 做 


的 好 处 是 避免 在 测试 过 程 中 一 些 人 为 的 和 主观 因素 的 干扰 。 开 发 和 测试 是 互 为 相反 的 行为 过 
程 ,两 者 有 着 本 质 的 不 同 。 正 如 前 面 提 到 的 ,在 程序 员 完 成 大 量 的 设计 和 编码 之 后 ,让 他 否定 
自己 所 做 的 工作 是 非常 不 易 的 ,可 以 说 很 少 有 人 能 有 这 样 的 心态 。 另 外 ,自己 测试 不 容易 发 现 
在 系统 需求 .分析 及 设计 规约 上 的 缺陷 或 理解 上 的 错误 ,如 果 程 序 员 检查 自己 的 代码 ,那么 他 
对 系统 需求 规约 、 分 析 和 设计 规约 的 理解 缺乏 客观 性 ,往往 存在 着 对 问题 叙述 或 说 明 的 误解 ， 
不 难 想 象 , 带 有 错误 认识 的 程序 员 是 很 难 发 现 自己 程序 存在 的 问题 的 。 因 此 ,程序 员 即 使 是 在 
做 白 盒 测试 时 也 要 尽量 避免 检查 自己 的 代码 。 避 免 程序 员 测 试 自己 的 代码 的 主要 原因 可 归 
纳 为 : 

。 程序 员 承 认 自 己 写 的 程序 有 缺陷 往往 比较 难 。 

。 程序 员 的 测试 思路 有 局 限 性 ,在 做 测试 时 很 容易 受到 编程 思路 的 影响 ,不 自主 地 向 自 

己 期 望 的 目标 倾斜 。 
。 大 多 数 程序 员 没 有 严格 正规 的 职业 训练 ,缺乏 专业 测试 技术 ,也 缺乏 测试 经 验 。 
。 发 现 缺 陷 后 往往 缺乏 跟踪 缺陷 的 习惯 ,容易 忽视 回归 测试 和 版 本 的 控制 工作 。 


1.6.6 设计 完善 的 测试 用 例 


测试 用 例 是 为 特定 的 目的 而 设计 的 一 组 测试 输入 、 执 行 条 件 和 预期 的 结果 。 测 试用 例 是 
执行 程序 的 最 小 实体 。 软 件 测试 的 本 质 就 是 针对 要 测试 的 内 容 确定 一 组 测试 用 例 。 测 试用 例 
可 能 包括 如 下 项 : 

。 用 例 编号 。 

， 在 执行 测试 用 例 之 前 ,应 满足 其 执行 的 前 提 条 件 。 

。 输入 (合理 的 \ 不 合理 的 ) 。 

。 预期 输出 (合理 的 及 不 合理 的 异常 等 ) 。 

。 实际 输出 。 

。 测试 用 例 执行 时 间 。 

。 测试 用 例 执行 人 员 。 

。 被 测试 程序 的 版 本 号 。 
测试 用 例 的 目的 。 
测试 问题 的 描述 。 

。 是否 通 过 。 

测试 用 例 的 项 的 多 少 根据 实际 情况 而 定 。 但 是 用 例 输入 、 预 期 输出 、 实 际 输出 、 执 行 前 提 
条 件 ,被 测试 程序 版 本 一 般 是 必须 的 项 。 也 就 是 说 ,进行 测试 活动 时 ,首先 要 建立 必要 的 前 提 
条 件 ,提供 测 试用 例 输入 、 预 期 输出 及 其 他 的 测试 用 例 项 ,测试 用 例 执行 后 观察 实际 输出 ,然后 
将 实际 输出 与 预期 输出 相 比 较 , 以 确定 测试 用 例 是 否 通 过 。 在 进行 测试 用 例 的 设计 时 往往 要 
考虑 多 种 因素 ,针对 不 同 的 测试 级 别 、 测 试 内 容 , 测 试用 例 的 设计 考虑 的 因素 也 不 一 样 。 例 如 ， 
在 进行 单元 测试 时 ,用 例 的 设计 要 考虑 测试 用 例 是 否 覆盖 单元 的 所 有 功能 (包括 正 例 和 反例 )、 
是 否 要 涉及 功能 外 的 测试 用 例 等 ; 在 进行 集成 测试 的 测试 用 例 设 计时 ,用 例 的 设计 要 考虑 用 
例 是 否 覆 盖 所 有 接口 等 ; 在 进行 系统 级 别 的 测试 时 ,用 例 设计 要 考虑 业务 流 的 覆盖 (包括 正常 
的 业务 功能 覆盖 , 非 正常 的 业务 功能 覆盖 ) 和 外 围 设备 及 网 络 有 关 的 接口 覆盖 等 。 例 如 ,在 测 
试 一 个 银行 卡 的 密码 功能 时 ,一 个 完善 的 测试 用 例 集 应 该 考虑 : 

。 密码 位 数 的 测试 (合理 的 位 数 和 不 合理 的 位 数 ) 。 


。 输入 密码 的 数据 类 型 测试 (除数 字 外 是 否 容许 其 他 类 型 的 字符 ) 。 

。 密码 输入 的 内 容 是 否 支持 粘贴 。 

。 密码 的 首 字符 是 否 支持 数字 和 字母 以 外 的 任何 其 他 字符 。 

。 密码 是 否 区 别 大 小 写 。 

。 输入 密码 的 错误 次 数 超出 规定 的 值 时 是 否 吞 卡 。 

。 输 入 的 密码 应 该 显示 星 号 。 

测试 用 例 的 设计 是 测试 工作 的 核心 内 容 , 应 该 尽 可 能 地 设计 得 周密 细致 。 测 试用 例 设计 
完成 后 需要 进行 评审 ,以 确定 设计 的 测试 用 例 集合 是 否 符合 预期 的 要 求 。 


1.6.7 注意 测试 中 的 群集 现象 


经 验 表明 ,测试 后 软件 系统 中 残存 的 缺陷 数目 与 该 软件 中 已 发 现 的 缺陷 数 成 正比 。 根 据 
这 个 规律 ,应当 对 缺陷 群集 的 软件 部 分 进行 重点 测试 ,以 提高 测试 投资 的 效益 。 

在 所 测 的 软件 部 分 中 , 若 发 现 缺陷 数目 多 , 则 可 能 残存 的 缺陷 数目 也 比较 多 。 这 种 缺陷 群 
集 性 现象 已 被 许多 软件 的 测试 实践 所 证 实 。 例 如 ,在 美国 IBM 公司 的 OS/370 操作 系统 中 ， 
47% 的 错误 或 缺陷 仅 与 该 系统 4% 的 程序 模块 有 关 。 这 种 现象 对 测试 很 有 用 。 例 如 ,如 果 发 
现 某 一 程序 模块 似乎 比 其 他 程序 模块 有 更 多 的 错误 或 缺陷 的 倾向 , 则 应 当 花 费 较 多 的 时 间 和 
代价 测试 这 个 程序 模块 。 


1.6.8 确认 缺陷 的 有 效 性 


软件 系统 是 由 不 同 的 模块 或 类 构成 的 , 当 发 现 缺陷 时 需要 对 缺陷 进行 定位 ,定位 后 提交 至 
缺陷 管理 系统 ,之 后 进入 修复 缺陷 的 过 程 。 但 是 由 于 模块 或 类 之 间 具 有 很 强 的 关联 性 ,导致 缺 
陷 之 间 也 具有 关联 性 ,如 A 类 和 B 类 有 消息 传递 .测试 人 员 发 现 A 类 传递 的 参数 类 型 不 正确 ， 
这 样 会 导致 B 类 执行 的 结果 也 不 正确 ,这 时 可 能 存在 的 情况 是 程序 员 修复 了 A 类 中 不 正确 的 
参数 类 型 之 后 与 A 类 相关 的 也 类 的 执行 结果 不 正确 的 缺陷 会 自动 消失 或 称 自动 关闭 。 另 外 
的 情况 是 当 发 现 了 某 缺 陷 之 后 ,在 没有 将 该 缺陷 提交 缺陷 管理 系统 之 前 的 这 段 时 间 , 缺 陷 已 经 
被 程序 员 发 现 并 修复 ,这 时 我 们 提交 的 并 不 是 真正 的 缺陷 。 

缺陷 的 有 效 性 的 来 源 可 能 还 涉及 : 

。 测试 过 程 的 控制 管理 混乱 。 

。 对 需求 ,分 析 及 设计 的 理解 歧义 。 

对 代码 理解 的 歧义 。 
运行 环境 的 不 合理 。 

。 人 为 因素 。 

。 测试 工具 和 测试 方法 使 用 不 当 。 


1.6.9 合理 安排 测试 计划 


测试 计划 是 一 个 描述 测试 目的 ,测试 范围 ,测试 方法 以 及 测试 需要 多 少 资源 的 项 目 文档 。 
它 可 能 包括 标题 软件 版 本 、 文 档 目 的 ,软件 概 要 、 需 求 跟踪 、 项 目 组 织 结构 、 项 目 风 险 分 析 、 测 
试 范围 测试 环境 (数据 环境 与 软 硬 件 环境 ) ,测试 方法 以 及 附件 等 。 测 试 计划 是 测试 阶段 的 开 
始 , 合 理 的 计划 是 成 功 的 一 半 。 测 试 计划 一 般 解 决 的 是 5W(What、When、Where、Who、How) 
的 问题 , 即 在 什么 时 间 地 点 由 谁 来 怎样 完成 什么 样 的 任务 。 测 试 计划 除了 合理 之 外 ,计划 本 身 


应 该 逻辑 清晰 。 男 外 ,测试 计划 在 编写 之 前 需要 进行 各 方面 的 分 析 , 这 些 分 析 包 括 需 求 分 析 、 
用 户 或 者 开发 人 员 的 沟通 、 被 测 系统 的 分 析 、 测 试 方法 的 分 析 等 。 在 编写 测试 计划 时 ,一 个 合 
理 的 测试 计划 模板 也 很 重要 ,可 以 借鉴 并 使 用 一 些 实用 有 效 的 测试 计划 模板 ,也 可 以 使 用 国际 
标准 的 测试 计划 模板 ,比如 ,IEEE 提供 的 测试 计划 标准 模板 。 


1.6.10 进行 回归 测试 


回归 测试 作为 软件 生命 周期 的 一 个 组 成 部 分 ,在 整个 软件 测试 过 程 中 占有 很 大 的 比重 ,不 
同 的 测试 级 别 都 会 进行 多 次 回归 测试 。 在 渐进 和 快速 迭代 开发 中 ,新 版 本 的 连续 发 布 使 回归 
测试 进行 的 更 加 频繁 ,而 在 极限 编程 方法 中 ,更 是 要 求 每 天 都 进行 若干 次 回归 测试 。 因此, 通 
过 选择 正确 的 回归 测试 策略 来 改进 回归 测试 的 效率 和 有 效 性 是 非常 有 意义 的 。 

回归 测试 的 目的 是 对 修正 缺陷 后 的 应 用 程序 进行 测试 ,以 确保 缺陷 被 修复 ,并 且 没 有 引入 
新 的 软件 缺陷 。 回 归 测 试 可 以 采用 手工 测试 和 自动 化 测试 或 手工 和 自动 化 结合 的 方式 来 检验 
软件 缺陷 是 否 被 修正 。 回 归 测 试 又 可 分 为 完全 回归 测试 和 部 分 回归 测试 。 完 全 回归 测试 是 对 
所 有 修正 的 缺陷 进行 验证 ,执行 全 部 的 测试 用 例 。 但 由 于 测试 时 间 紧 张 ,需要 验证 的 缺陷 数量 
巨大 ,可 以 对 相关 的 测试 用 例 进行 部 分 回归 测试 ,这 时 就 要 对 测试 用 例 集 进行 维护 ,常用 的 方 
法 包括 : 

。 删除 过 时 的 测试 用 例 。 

。 改进 或 优化 现 有 的 测试 用 例 。 

。 删除 宛 余 的 测试 用 例 。 

。 增加 新 的 测试 用 例 。 

。 考虑 测试 的 优先 级 ,对 严重 性 高 的 缺陷 进行 回归 测试 。 

前 面 曾 提 到 缺陷 之 间 具 有 关联 性 , 某 个 缺陷 可 以 因为 其 他 缺陷 而 出 现 或 者 消失 。 此 时 , 若 
想 关 闭 某 个 缺陷 ,必须 先 关闭 它 的 父 缺陷 。 这 些 缺 陷 之 间 存 在 单纯 的 依赖 ,多 重 依赖 或 复杂 的 
依赖 关系 ,依赖 意味 着 新 缺陷 的 出 现 或 原来 缺陷 的 消失 。 例 如 ,A 缺陷 单纯 依赖 于 已 缺陷 , 那 
么 由 于 BB 缺陷 的 出 现 导致 A 缺陷 的 出 现 ,或 者 B 缺陷 的 修复 导致 A 缺陷 的 消失 ,或 者 是 也 缺 
陷 的 修复 导致 其 他 缺陷 的 产生 等 。 这 些 依赖 关系 可 以 用 图 1-12 表示 。 


基于 缺陷 之 间 的 关联 性 ,程序 员 在 修正 个 
钢 陷 后 ,有 可 能 会 引信 一 处 或 多 处 全 陷 , 使 得。 四 

应 用 程序 不 能 正常 运行 。 另 外 , 当 需 求 变更 了 (oj (© 
或 者 增加 新 的 需求 时 ,对 原 有 系统 也 具有 类 of te 

似 的 波及 效应 ,可 能 会 导致 一 个 或 更 多 个 缺 。 《人 。 罗 ”(9 区 


陷 的 产生 。 因 此 当 应 用 程序 有 所 改动 时 ,也 


需要 进行 多 次 回归 测试 以 保证 缺陷 被 正确 关 ”(®) 单纯 依 顿 。。 (b) 多 重 依赖 (©) 复合 依 下 
闭 ,并 且 保证 应 用 程序 中 原先 能 正常 运行 的 图 1-12 依赖 关系 
部 分 依然 正常 工作 。 


1.6.11 测试 结果 的 统计 和 分 析 

在 测试 用 例 执行 完 之 后 ,除了 不 能 再 现 和 没 必要 修复 的 缺陷 之 外 ,所 有 其 他 的 缺陷 在 缺陷 
跟踪 工作 中 应 该 是 “关闭 ”状态 ,这 时 测试 管理 人 员 和 测试 技术 人 员 就 可 以 对 测试 结果 进行 分 
析 和 统计 。 测 试 结果 中 可 能 存在 着 大 量 正确 的 以 及 错误 的 输出 信息 ,因此 ,只 有 对 这 些 输 出 信 


息 进 行 深入 的 统计 、 分 析 和 比较 ,才能 够 正确 地 鉴别 测试 后 输出 的 数据 ,给 出 清晰 的 错误 原因 
分 析 报 告 。 当 输出 的 信息 很 庞大 时 ,可 以 借助 专业 的 测试 工具 。 

例如 ,在 使 用 Loadrunner 进行 性 能 和 压力 测试 时 ,Loadrunner 会 提供 详尽 的 分 析 报 告 。 
要 查找 系统 瓶颈 ,就 必须 分 析 LoadRunner 获取 的 性 能 指标 数据 。 在 LoadRunner 场景 运行 的 
同时 获取 了 大 量 的 数据 ,这 些 数据 可 以 通过 以 下 几 种 方式 进行 分 析 : 

。 查看 Vuser Log 文件 ,这 些 文件 包括 了 场景 运行 过 程 中 每 个 用 户 的 跟踪 数据 。 Vuser 
Log 文件 一 般 放 在 脚本 目录 中 。 
在 控制 台 的 输出 窗口 查看 场景 的 执行 过 程 信息 。 
使 用 Analysis 模块 分 析 执 行 结果 图 表 。 
。 使 用 直接 生成 的 图 表 查 看 原始 数据 Graph Data 或 者 Raw Data。 
。 让 LoadRunner 自动 生成 HTML 或 Word 格式 的 测试 报告 ,通过 报告 进行 分 析 。 


1.6.12 及 时 更 新 测试 


由 于 各 种 原因 ,在 测试 过 程 中 测试 用 例 需要 随时 更 新 ,例如 ,在 详细 设计 说 明 书 评审 合格 
之 后 ,测试 人 员 就 开始 进行 单元 测试 用 例 的 分 析 和 设计 工作 。 而 可 能 出 现 的 情况 是 在 后 来 的 
工作 中 由 于 某 种 原因 对 详细 设计 说 明 书 做 了 修改 ,这 时 单元 测试 的 测试 用 例 也 必须 更 新 ,否则 
可 能 造成 测试 用 例 过 时 的 现象 ,给 测试 工作 带 来 不 必要 的 麻烦 ,导致 测试 的 失败 。 事 实 上 ,有 
可 能 导致 测试 失败 的 原因 还 有 很 多 ,可 大 致 归纳 为 如 下 几 点 : 

。 测试 团队 管理 不 规范 ,没有 建立 需求 .分 析 和 设计 规约 与 测试 用 例 之 间 的 关联 。 

。 测试 团队 中 沟通 不 畅 , 没 做 到 内 部 的 很 好 协调 。 

。 测试 团队 和 项 目 团队 沟通 不 畅 。 

。 测试 过 程 中 ,执行 角色 混乱 。 

。 测试 团队 缺乏 良好 的 培训 。 

。 没有 适当 的 测试 和 管理 工具 。 

在 测试 过 程 中 ,需求 变更 管理 不 善 也 是 造成 测试 过 程 混乱 的 重要 原因 之 一 ,从 而 导致 测试 
失败 或 测试 效果 不 佳 ,尤其 是 对 于 中 小 型 软件 企业 来 说 ,出 现 这 种 情况 的 可 能 性 更 多 一 些 。 在 
一 些 大 型 的 软件 公司 ,可 以 通过 定义 严格 的 测试 流程 并 使 用 成 熟 的 测试 变更 管理 工具 等 方法 
来 避免 类 似 情况 的 发 生 。 另 外 ,由 于 被 测试 系统 的 运行 环境 的 变化 、 项 目的 交付 时 间 的 调整 导 
致 的 测试 时 间 的 调整 资金 支持 的 变化 .是 否 使 用 测试 工具 等 因素 均 可 能 导致 测试 的 失败 , 因 
此 ,为 了 避免 因 各 种 因素 导致 测试 失败 的 情况 发 生 ,唯一 的 解决 办 法 就 是 要 及 时 更 新 测试 。 


1.7 软件 测试 级 别 和 模型 


1.7.1 软件 测试 级 别 


在 软件 编码 结束 后 ,对 编写 的 每 一 个 程序 模块 进行 测试 称 为 “模块 测试 "或 “单元 测试 ”。 
在 面向 对 象 的 程序 设计 中 一 般 将 对 类 的 测试 称 为 单元 测试 。 在 单元 测试 之 后 ,将 这 些 模 块 或 
类 集成 在 一 起 而 进行 的 测试 称 为 “集成 测试 "。 将 整个 程序 模块 或 类 集成 为 软件 系统 并 安装 在 
运行 环境 下 ,对 于 硬件 .网络 ,操作 系统 及 支撑 平台 构成 整体 系统 而 进行 的 测试 称 为 “系统 测 
试 "。 在 上 述 测试 后 ,需要 检测 与 证 实 软件 是 否 满足 软件 需求 说 明 书 中 规定 的 要 求 ,这 就 称 为 


“验收 测试 ?或 者 “确认 测试 ”>。 所 以 ,在 整个 软件 开发 过 程 中 软件 测试 分 为 不 同 的 级 别 ,每 一 个 
级 别 的 测试 起 到 不 同 的 作用 。 

1. 单元 测试 

单元 测试 是 针对 各 个 代码 单元 进行 的 测试 。 测 试 仅 围 绕 着 具体 的 程序 模块 或 类 进行 。 单 
元 测试 将 整体 测试 任务 有 效 分 解 ,对 测试 出 的 软件 缺陷 能 够 准确 定位 在 模块 级 别 , 从 而 减轻 了 
调试 任务 。 此 外 ,单元 测试 使 得 传统 的 流水 软件 测试 流程 得 以 分 解 ,在 某 种 程度 上 达到 同步 测 
试 的 目的 ,提高 了 测试 阶段 的 效率 。 

在 设计 单元 测试 用 例 时 ,要 注意 对 被 测试 单元 两 个 方面 的 信息 进行 对 比 查 看 : 详细 设计 
和 源 代 码 。 详 细 设计 通常 包含 对 被 测试 单元 的 接口 (输入 和 输出 ) 及 功能 (算法 ) 的 具体 定义 。 
在 设计 测试 用 例 时 , 找 出 符合 测试 设计 中 有 关 准 则 的 输入 数据 进行 输入 ,然后 检查 结果 ,看 其 
是 否 正确 。 

单元 测试 中 常见 的 问题 就 是 如 何 划分 单元 并 独立 地 对 其 进行 测试 。 对 于 一 个 单元 应 该 多 
大 才 最 为 合适 的 问题 ,业界 已 经 有 过 很 多 的 讨论 ,究竟 一 个 单元 仅仅 是 一 个 函数 ,一 个 类 ,还 是 
相关 类 的 集合 ? 这 些 讨论 并 不 影响 在 这 里 所 要 阐述 的 观点 。 我 们 权 且 认为 一 个 单元 就 是 一 个 
最 小 程度 的 代码 块 ,开发 人 员 可 以 对 其 进行 独立 地 讨论 。 但 是 如 何 独立 地 测试 代码 块 呢 ? 比 
如 要 测试 某 个 类 (比如 是 商业 逻辑 层 中 的 一 个 类 ) 的 某 个 方法 ,但 这 个 方法 要 连接 到 数据 库 , 这 
个 类 怎么 来 进行 单元 测试 呢 ? 对 单元 进行 独立 的 测试 涉及 仿真 对 象 (Mock Object) 的 概念 。 
传统 的 单元 测试 术语 (Unit Testing Terminology) 包 括 了 驱动 模块 (Driver) 和 桩 模块 (Stub) 。 
driver 的 目的 很 单纯 ,就 是 为 了 访问 类 库 的 属性 和 方法 来 检测 类 库 的 功能 是 否 正确 ; stub 的 
目的 同样 单纯 ,就 是 提供 需要 和 测试 类 库 交互 的 那些 类 的 实现 。 

如 果 被 测试 的 单元 需要 调用 其 他 的 功能 或 者 函数 ,就 应 该 设计 一 个 和 被 调用 单元 名 称 相 
同 的 桩 模块 来 模拟 被 调用 单元 。 这 个 桩 模块 本 身 不 执行 任何 功能 , 仅 在 被 调用 时 返回 静态 值 
来 模拟 被 调用 模块 的 行为 。 举 例 说 明 : 如 果 被 测试 单元 中 需要 调用 另 一 个 模块 customer 的 
函数 getCustomerAddress(customerID:Integer) ,这 个 函数 应 该 查询 数据 库 后 返回 某 一 个 客 
户 的 地 址 。 我 们 设计 的 同名 桩 模块 中 的 同名 函数 并 没有 真正 对 数据 库 进 行 查询 ,而 仅 模拟 了 
这 个 行为 ,直接 返回 了 一 个 静态 的 地 址 ,例如 “123 Newton Street”。 桩 模块 的 设置 使 得 单元 测 
试 的 进行 成 为 一 个 相对 独立 且 简 单 的 过 程 。 


pp ee 与 桩 模块 对 应 的 是 驱动 模块 ( 见 图 1-13) ,如 果 被 
| | | 测试 模块 中 的 函数 是 提供 给 其 他 函数 调用 的 ,在 设计 
测试 用 例 时 就 应 该 设计 驱动 模块 。 下 面 用 一 个 例子 
来 说 明了 驱动 模块 的 用 法 。 了 驱动 模块 可 以 通过 模拟 一 
图 1-13 ” 桩 模块 和 驱动 模块 示意 图 系列 用 户 操作 行为 ,比如 选择 用 户 界面 上 的 某 一 个 选 
项 或 者 单 击 某 个 按钮 等 ,自动 调用 被 测试 模块 中 的 函 

数 。 驱 动 模块 的 设置 ,使 对 模块 的 测试 不 必 与 用 户 界面 真正 交互 。 
单元 测试 必须 将 代码 单元 与 系统 其 他 部 分 隔离 ,进行 独立 的 测试 。 单 元 作为 被 测试 的 最 

小 单位 几乎 是 对 源 代码 直接 测试 ,因此 需要 与 开发 人 员 密切 配合 。 
单元 测试 最 重要 的 目的 是 保证 每 一 个 代码 单元 正确 、 完 整地 执行 其 定义 (如 系统 详细 设计 
规约 中 定义 的 ) 的 功能 。 单 元 测试 往往 由 一 系列 的 测试 用 例 构 成 ,这 些 测试 用 例 根据 每 个 功能 
来 定义 其 测试 用 例 的 输入 、 输 出 及 行为 。 单 元 测试 除了 用 功能 性 测试 方法 外 ,还 可 以 利用 结构 

性 测试 ( 白 盒 测试 ) 方 法 进行 测试 。 


Component: B Stub B 
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除 上 述 之 外 ,单元 测试 还 要 考虑 到 在 下 一 步 的 集成 测试 中 各 个 单元 整合 后 的 稳定 性 
(robustness) ,因而 单元 测试 要 同时 考虑 一 些 非 功能 性 因素 ,比如 对 代码 单元 效率 (efficiency)、 
可 维护 性 (maintainability) 的 测试 。 效 率 是 指 对 计算 机 资源 的 耗 用 ,比如 内 存 占用 率 、 系 统 响 
应 时 间 、 硬 盘 及 网 络 访问 时 间 等 。 可 维护 性 是 指 对 已 编写 好 的 代码 单元 的 后 期 修改 .扩展 及 维 
护 难 易 程度 。 决 定 可 维护 性 高 低 的 一 个 重要 标准 是 在 代码 单元 编写 好 的 一 段 时 间 后 (如 数 月 
或 数 年 之 后 ) ,此 代码 单元 对 于 任何 源 代 码 维护 人 员 而 言 的 易 读 性 、 易 理解 性 以 及 易 修 改 性 。 
所 以 代码 的 结构 、 模 块 划分 的 标准 、 源 程序 的 注释 、 编 写 格 式 标 准 化 等 都 是 重要 的 衡量 因素 。 

2. 集成 测试 

集成 测试 (也 叫做 组 装 测试 ,联合 测试 ) 是 单元 测试 的 逮 辑 扩展 。 它 的 最 简单 形式 是 已 经 
测试 过 的 单元 组 合 在 一 起 ,主要 目的 是 测试 单元 之 间 的 接口 。 集 成 测试 的 工作 主要 是 把 单元 
测试 过 的 各 模块 或 类 逐步 集成 在 一 起 来 测试 数据 是 否 能 够 在 各 模块 或 类 间 正 确 流动 ,以 及 各 
模块 或 类 能 和 否 正确 同步 。 与 单元 测试 相 比 较 , 集 成 测试 是 比较 复杂 的 ,而 且 对 于 不 同 的 技术 、 

台 和 应 用 ,差异 也 比较 大 。 集 成 测试 更 多 是 和 开发 环境 融合 在 一 起 ,在 编程 过 程 中 去 实现 ， 
如 MS Visual Studio. NET .Borland JBuilder IDE .Compuware Optimal] 和 eclipse 等 集成 开 
发 /测试 环境 。 更 正确 的 说 法 ,集成 测试 要 追溯 到 设计 阶段 。 当 设计 数据 接口 (DB、XML 等 )、 
组 件 接口 、 应 用 接口 (APD) 之 时 ,就 要 审查 接口 的 规范 性 一 致 性 等 ,就 已 经 开始 了 集成 测试 。 

集成 模式 是 软件 集成 测试 中 的 策略 体现 ,其 重要 性 是 明显 的 ,直接 关系 到 测试 的 效率 、 结 
果 等 ,一 般 要 根据 具体 的 系统 来 决定 采用 哪 种 模式 。 集 成 测试 的 模式 基本 可 以 概括 为 以 下 
两 种 : 

。 非 渐 增 式 集成 测试 模式 : 先 分 别 测试 每 个 模块 或 类 ,再 把 所 有 模块 或 类 按 设 计 要 求 一 

次 性 全 部 组 装 起 来 构成 所 要 的 系统 ,然后 对 其 进行 集成 测试 。 
。 渐 增 式 集成 测试 模式 : 把 下 一 个 要 测试 的 模块 或 类 同 已 经 测试 好 的 模块 或 类 结合 起 
来 进行 集成 测试 。 

非 渐 增 式 测试 时 可 能 发 现 大 量 缺 陷 ,为 每 个 缺陷 的 定位 和 纠正 非常 困难 ,并 且 在 改正 一 个 
缺陷 的 同时 又 可 能 引入 新 的 缺陷 ,新 旧 缺 陷 混杂 ,更 难 断 定 出 错 的 原因 和 位 置 。 与 之 相反 的 是 
渐 增 式 集成 模式 ,程序 一 段 一 段 地 扩展 ,测试 的 范围 一 步 一 步 地 增 大 ,缺陷 易于 定位 和 纠正 , 接 
口 的 测试 也 可 做 到 完全 彻底 。 两 种 模式 中 , 渐 增 式 测试 模式 虽然 需要 编写 的 Driver 或 Stub 
程序 较 多 ,发现 模 块 间接 口 缺 陷 相 对 稍 晚 些 ,但 渐 增 式 测试 模式 还 是 具有 比较 明显 的 优势 。 

在 实际 测试 中 ,应 该 将 两 种 模式 有 机 结合 起 来 ,采用 并 行 的 自 项 向 下 、 自 底 向 上 集成 方式 ， 
而 形成 改进 的 三 明治 方法 。 而 更 重要 的 是 采取 持续 集成 的 策略 ,软件 开发 中 各 个 模块 或 类 不 
是 同时 完成 ,根据 进度 将 完成 的 模块 或 类 尽 可 能 早 地 进行 集成 ,有 助 于 尽早 发 现 缺陷 ,避免 集 
成 阶段 大 量 缺 陷 涌 现 。 同 时 自 底 向 上 集成 时 ,先期 完成 的 模块 或 类 将 是 后 期 模块 的 桩 程序 ， 
而 自 项 向 下 集成 时 ,先期 完成 的 模块 或 类 将 是 后 期 模块 或 类 的 驱动 程序 ,从 而 使 后 期 模块 
或 类 的 单元 测试 和 集成 测试 出 现 了 部 分 交叉 ,不仅 节省 了 测试 代码 的 编写 ,也 有 力 于 提高 
工作 效率 。 

从 测试 程度 角度 来 讲 , 集 成 测试 可 以 分 为 两 种 : 手工 黑 盒 和 代码 灰 盒 。 灰 盒 测试 是 介 于 
白 盒 测 试 和 黑 盒 测试 之 间 的 测试 ,是 现代 测试 的 一 种 思想 ,是 指 在 白 盒 测 试 中 交叉 使 用 黑 盒 测 
试 的 方法 ,在 黑 盒 测试 中 交叉 使 用 白 盒 测 试 的 方法 。 手 工 黑 盒 与 后 续 的 系统 测试 的 测试 用 例 
存在 重用 。 代 码 灰 盒 是 指针 对 组 件 的 接口 采用 代码 调用 的 方式 来 测试 ,一 般 不 会 涉及 白 盒 测 
试 , 即 不 关心 组 件 内 部 是 如 何 实现 的 ,只 关心 组 件 的 接口 。 


3. 系统 测试 

系统 全 部 集成 完毕 以 后 的 测试 是 系统 测试 。 系 统 测 试 是 将 软件 .计算 机 硬件 .外 设 、 网 络 
等 其 他 元 素 结合 在 一 起 所 进行 的 测试 ,主要 测试 用 户 的 功能 和 非 功 能 性 需求 指标 是 否 都 在 软 
件 中 正确 实现 ,检测 已 集成 在 一 起 的 软件 产品 是 否 符合 系统 需求 规格 说 明 书 的 要 求 。 该 测试 
把 软件 作为 一 个 黑 盒 , 针 对 每 个 需求 规格 组 织 各 种 输入 并 根据 软件 输出 来 判断 该 需求 规格 是 
和 否 正 确实 现 ,因此 系统 测试 偏重 于 黑 盒 测试 。 

系统 测试 人 员 负 责 制 定 测试 计划 并 依照 测试 计划 进行 测试 。 这 些 测 试 包括 功能 性 的 测试 
( 黑 盒 测试 ) 和 非 功能 性 的 测试 (如 压力 测试 ) 等 。 测 试 人 员 需 要 良好 的 测试 工具 来 辅助 完成 测 
试 任务 ,自动 化 的 测试 工具 将 大 幅度 提高 系统 测试 人 员 的 工作 效率 ,测试 的 效果 和 质量 。 

4. 验收 测试 

验收 测试 是 部 署 软件 之 前 的 最 后 一 个 测试 阶段 。 验 收 测试 的 目的 是 确保 软件 准备 就 绪 ， 
验证 软件 的 有 效 性 。 验 收 测试 的 任务 , 即 验证 软件 的 功能 和 性 能 及 其 他 特性 是 否 满足 用 户 的 
需求 。 验 收 测试 是 一 项 管理 严格 的 过 程 , 它 通常 是 系统 测试 的 延续 。 计 划 和 设计 验收 测试 的 
周密 和 详细 程度 不 亚 于 系统 测试 。 测 试用 例 包括 测试 系统 特性 测试 用 例 和 系统 测试 中 所 执行 
测试 用 例 的 子 集 。 在 很 多 组 织 中 ,验收 测试 是 完全 自动 执行 的 。 

验收 测试 一 般 包括 用 户 验 收 测试 、 系 统管 理 员 的 验收 测试 (包括 测试 备份 和 恢复 、 灾 难 恢 
复 、 用 户 管理 ,任务 维护 、 定 期 的 安全 漏洞 检查 等 ) ,基于 合同 的 验收 测试 .a 和 8B 测试 。 

对 于 验收 测试 ,在 某 些 组 织 中 ,开发 组 织 ( 或 其 独立 的 测试 小 组 ) 与 最 终 用 户 组 织 的 代表 一 
起 执行 验收 测试 。 在 其 他 组 织 中 ,验收 测试 则 完全 由 最 终 用 户 组 织 执行 ,或 者 由 最 终 用 户 组 织 
选择 人 员 组 成 一 个 客观 公正 的 小 组 来 执行 。 


1.7.2 软件 测试 生命 周期 


把 测试 的 生命 周期 分 为 几 个 阶段 。 前 三 个 阶段 是 引入 程序 缺陷 阶段 ,也 就 是 开发 过 程 中 
的 需求 (分 析 ) 设计 (包括 概要 设计 和 详细 设计 ) ,编码 阶段 ,在 这 前 三 个 阶段 需要 对 其 工作 产 
品 做 评审 ,评审 就 是 一 种 静态 测试 。 这 些 阶 段 极 易 引 入 缺陷 或 者 由 这 些 阶 段 引起 的 而 导致 开 
发 过 程 的 其 他 阶段 产生 缺陷 。 代 码 生 成 后 ,是 通过 测试 发 现 这 些 阶 段 的 缺陷 ,这 里 的 测试 是 一 
种 动态 测试 ,这 需要 通过 使 用 适当 的 测试 技术 和 方法 来 实现 。 最 后 的 三 个 阶段 是 清除 缺陷 的 
阶段 ,其 主要 任务 是 发 现 缺 陷 、 进 行 缺陷 分 类 、 缺 陷 隔 离 和 修复 缺陷 。 其 中 在 修复 旧 缺 陷 的 时 
候 很 可 能 引进 新 的 缺陷 ,导致 原来 能 够 正确 执行 的 程序 出 现 新 的 缺陷 。 图 1-14 给 出 了 软件 测 
试 生命 周期 (software testing life cycle) 的 模型 。 
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图 1-14 软件 测试 生命 周期 


1.7.3 开发 和 测试 模型 


任何 一 个 软件 项 目的 开发 都 应 该 遵循 针对 项 目 实际 情况 预先 选择 的 软件 开发 生命 周期 模 
型 [IEEE/IEC 12207], 软 件 测试 是 每 一 个 软件 开发 生命 周期 模型 中 必 不 可 少 的 环节 。 本 节 通 
过 对 V 模型 .W 模型 .H 模型 及 其 他 模型 的 分 析 ,描述 了 软件 测试 在 软件 生命 周期 中 的 角色 ， 
探讨 了 不 同 软件 测试 级 别 以 及 测试 类 型 在 软件 生命 周期 中 的 应 用 。 

从 软件 测试 的 角度 来 讲 , 软 件 开发 的 V 模型 [Boehm 79] 最 为 重要 。V 模型 是 最 广为人知 
的 测试 模型 。Boehm 在 其 V 模型 中 表明 ,软件 测试 和 程序 编写 在 软件 开发 过 程 中 同等 重要 。 
这 个 理论 指出 了 软件 测试 不 仅仅 是 软件 开发 的 一 个 独立 阶段 ,而 应 贯穿 于 整个 软件 生命 周期 
中 。 每 一 个 测试 工程 师 及 程序 员 都 应 该 熟悉 V 模型 中 蕴涵 的 理论 ,其 原理 即使 在 其 他 软件 开 
发 模型 中 也 是 通用 的 。 除 V 模型 外 ,其 他 一 些 软件 测试 涉及 的 常用 模型 如 W 模型 .H 模型 及 
前 置 模型 均 有 简要 介绍 。 

1. V 模型 

V 模型 是 最 具有 代表 意义 的 测试 模型 ,最 早 由 Pual Rook 于 20 世纪 80 年 代 末 提 出 。V 
模型 是 软件 开发 瀑布 模型 的 变种 , 它 反映 了 测试 活动 与 分 析 和 设计 的 关系 。V 模型 指出 软件 
测试 不 仅仅 是 软件 开发 的 一 个 独立 阶段 ,而 应 


贯穿 于 整个 软件 生命 周期 中 ,V 模型 中 的 右 分 | 用 户 需求 名- / 
支 列 出 的 软件 测试 任务 和 相应 的 左 分 支 列 出 ~ kt 
的 软件 开发 任务 在 整个 软件 项 目 中 有 着 同等 。 | 区 | 
的 重要 性 。 其 左右 分 支 形 成 了 V 字 型 , 故 称 作 \ i 
V 模型 。CMM/CMMI 模型 仅 强 调 了 软件 开 概要 设计 上、 
发 项 目 中 什么 (What) 任务 必须 要 进行 ,而 V | gt 
模型 在 此 基础 上 还 补充 说 明了 什么 时 间 ee 
(When) ,怎么 样 (How) 来 实施 这 些 任 务 。 最 i 单元 测试 
典型 的 V 模型 版 本 一 般 会 在 其 开始 部 分 对 软 由 | ea | 
件 开发 过 程 进行 描述 ,如 图 1-15 所 示 。 编码 

从 左 到 右 ,该 模型 描述 了 基本 的 开发 阶段 
和 测试 阶段 ,非常 明确 地 标明 了 测试 过 程 中 存 一 一 ”所 指 意 为 测试 的 分 析 和 设计 的 依据 
在 的 不 同 级 别 ,并 且 清 楚 地 描述 了 这 些 测试 阶 图 1-15 V 模 型 


段 和 开发 各 阶段 的 对 应 关系 。 如 图 1-15 所 
示 , 实 线 箭 头 代 表 了 时 间 方 向 ,V 模型 的 左 分 支 下 降 的 部 分 是 表示 开发 过 程 各 阶段 ,用 户 需求 
的 定义 ,系统 需求 分 析 , 设 计 及 编码 ; 与 此 相对 应 的 是 右 分 支 上 升 的 部 分 , 即 测试 过 程 的 各 个 
阶段 ,单元 测试 ,集成 测试 ,系统 测试 及 验收 测试 。V 模型 左 侧 的 软件 开发 阶段 和 传统 瀑布 模 
型 的 开发 步骤 相 一 致 。V 模型 右 侧 的 测试 级 别 是 随 着 软件 开发 程度 的 加 深 而 对 应 的 不 同 级 
别 的 测试 阶段 。 

1) 单元 测试 

与 详细 设计 对 应 的 是 单元 测试 。 单 元 测试 是 检测 开发 的 代码 是 否 符合 详细 设计 的 要 求 。 
它 主要 是 对 详细 设计 中 的 每 个 功能 单元 (通常 是 函数 、 过 程 或 类 ) 代 码 进行 逻辑 覆盖 测试 或 功 
能 测试 ,因此 单元 测试 既 可 以 用 白 盒 测试 也 可 以 用 黑 盒 测试 。 

2) 集成 测试 

与 概要 设计 对 应 的 是 集成 测试 。 因 为 概要 设计 的 工作 主要 是 根据 功能 把 大 的 系统 进行 模 


块 分 解 , 所 以 集成 测试 的 工作 主要 是 把 各 模块 逐步 集成 在 一 起 来 测试 数据 是 否 能 够 在 各 模块 
间 正 确 流动 ,以 及 各 模块 能 否 正确 同步 。 因 为 这 种 测试 依赖 于 软件 的 架构 但 又 不 关心 每 个 函 
数 的 实现 细节 ,所 以 该 测试 关注 的 是 模块 之 间 的 接口 。 

3) 系统 测试 

与 需求 分 析 对 应 的 是 系统 测试 。 因 为 系统 的 需求 分 析 工 作 是 分 解 用 户 的 功能 和 非 功 能 性 
需求 并 规格 化 ,如 性 能 需求 .安全 人 性 需求 等 ,并 对 应 到 系统 中 ,所 以 系统 测试 的 工作 主要 就 是 测 
试 这 些 功 能 和 非 功 能 性 (如 性 能 指标 ) 是 否 都 在 软件 中 正确 实现 。 系 统 测试 检测 已 集成 在 一 起 
的 产品 是 否 符合 系统 规格 说 明 书 的 要 求 。 该 测试 把 软件 作为 一 个 黑 盒 ,针对 每 个 需求 规格 组 
织 各 种 输入 并 根据 软件 输出 来 判断 该 需求 规格 是 否 正确 实现 ,因此 系统 测试 偏重 于 黑 盒 测 试 。 

4) 验收 测试 

与 用 户 需 求 对 应 的 是 验收 测试 ,是 针对 系统 是 否 满足 用 户 需求 ,业务 流程 等 的 验收 。 当 技 
术 部 门 完成 了 所 有 测试 工作 后 ,由 业务 专家 或 用 户 进行 验收 测试 ,以 确保 产品 能 真正 符合 用 户 
业务 上 的 需要 。 

在 测试 的 每 一 个 级 别 中 ,测试 结果 都 要 和 相应 开发 阶段 的 规约 比较 而 进行 功能 准确 性 测 
试 ,也 称 验证 (Verification) , 即 软 件 生命 周期 中 的 每 一 个 阶段 的 成 果 是 否 满足 上 一 个 阶段 所 
设 定 的 目标 。 除 此 之 外 ,V 模型 还 要 求 对 每 一 个 测试 级 别 内 被 测试 内 容 的 正确 性 及 完整 性 与 
相应 的 开发 需求 进行 确认 (Validation) , 即 针对 测试 设计 内 容 本 身 的 准确 性 进行 确认 。 每 一 个 
级 别 的 测试 都 应 该 包含 上 述 两 个 方面 ,而 且 功能 准确 性 测试 的 程度 会 随 测试 级 别 的 升 高 而 逐 
步 加 深 。 在 实践 中 ,V 模型 中 的 各 个 开发 及 测试 阶段 往往 会 根据 具体 情况 有 所 增 减 甚至 组 合 
或 重新 排列 。 

2. W 模型 

V 模型 存在 一 定 的 局 限 性 , 它 仅 仅 把 测试 过 程 作为 在 需求 定义 、 需 求 分 析 、 系 统 概要 设 
计 、 系 统 详细 设计 及 编码 之 后 的 一 个 阶段 。 容 易 使 人 理解 为 测试 是 软件 开发 的 最 后 阶段 ,是 待 
需求 定义 ,分 析 、 设 计 和 编码 完成 之 后 才 进 行 软件 的 测试 工作 ,测试 主要 是 针对 程序 进行 ,而 需 
求 定义 需求 分 析 、 概 要 设计 ,详细 设计 阶段 隐藏 的 问题 一 直到 后 期 的 系统 测试 和 验收 测试 才 
被 发 现 。 在 V 模型 中 增加 软件 各 开发 阶段 应 同步 进行 的 测试 ,被 演化 为 一 种 W 模型 。 在 W 
模型 中 开发 是 V ,测试 也 是 与 此 相 重 释 的 V。W 模型 体现 了 “尽早 地 和 不 断 地 进行 软件 测试 ” 
的 原则 ,更 加 符合 现代 的 软件 开发 过 程 思 想 。 

相 比 于 V 模型 ,W 模型 可 以 说 是 前 者 自然 而 然 的 发 展 和 演化 ,由 Evolutif 公司 在 1999 年 
提出 。 相 对 于 V 模型 , W 模型 增加 了 软件 各 开发 阶段 中 应 同步 进行 的 验证 和 确认 
(verification 了 &. validation) 活 动 。 如 图 1-16 所 示 , W 模型 由 两 个 V 字 型 模型 组 成 ,分 别 代 表 
测试 与 开发 过 程 ,图 中 明确 表示 出 了 测试 与 开发 的 并 行 关系 。 

W 模型 强调 : 测试 伴随 着 整个 软件 开发 周期 ,而 且 测 试 的 对 象 不 仅仅 是 程序 ,需求 .设计 
等 阶段 的 工作 产品 同样 要 测试 ,也 就 是 说 ,测试 与 开发 是 同步 进行 的 。W 模型 有 利于 尽早 地 、 
全 面 地 发 现 问题 。 例 如 ,需求 分 析 完 成 后 ,测试 人 员 就 应 该 参与 到 对 需求 的 验证 和 确认 活动 
中 ,以 尽早 地 找 出 错误 或 缺陷 所 在 。 同 时 ,对 需求 的 测试 也 有 利于 及 时 了 解 项 目 难 度 和 测试 风 
险 , 及 早 制定 应 对 措施 ,这 将 显著 减少 系统 测试 时 间 ,加 快 项 目 进度 。 但 W 模型 也 存在 局 限 
性 ,在 W 模型 中 ,需求 设计、 编码 等 活动 被 视 为 串 行 的 ,同时 ,测试 和 开发 活动 也 保持 着 一 种 线 
性 的 前 后 关系 ,上 一 阶段 完全 结束 才 可 正式 开始 下 一 个 阶段 工作 。 这 样 就 无 法 支持 迭代 的 开发 
模型 。 对 于 当前 软件 开发 复杂 多 变 的 情况 ,W 模型 并 不 能 完全 解除 测试 管理 所 面临 的 困惑 。 
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3. H 模型 


也 模型 将 软件 测试 看 成 一 个 独立 的 流程 贯穿 于 软件 产品 的 开发 周期 , 当 某 个 测试 时 间 点 
就 绪 时 ,软件 测试 工作 就 可 以 开始 。 

V 模型 和 W 模型 均 存在 一 些 不 妥 之 处 。 如 前 所 述 , 它 们 都 把 软件 的 开发 视 为 需求 .设计 、 
编码 等 一 系列 串 行 的 活动 ,而 事实 上 ,这 些 活动 在 大 部 分 时 间 内 是 可 以 交叉 进行 的 ,所 以 ,相应 
的 测试 之 间 也 不 存在 严格 的 次 序 关系 。 同 时 ,各 层次 的 测试 (单元 测试 .集成 测试 .系统 测试 
等 ) 也 存在 反复 触发 .迭代 的 关系 。 为 了 解决 以 上 问题 ,有 专家 提出 了 H 模型 。 它 将 测试 活动 
完全 独立 出 来 ,形成 了 一 个 完全 独立 的 流程 ,将 测试 准备 活动 和 测试 执行 活动 清晰 地 体现 出 
来 ,如 图 1-17 所 示 。 


测试 就 绪 点 
测试 准备 测试 执行 
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二 下 
! 
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e 其 他 流程 (如 设计 流程 ) 
图 1-17 软件 测试 HH 模型 


图 1-17 仅仅 演示 了 在 整个 开发 周期 中 某 个 层次 上 的 一 次 测试 “ 微 循环 "。 图 中 标注 的 其 
他 流程 可 以 是 任意 的 开发 流程 ,例如 设计 流程 或 编码 流程 。 也 就 是 说 ,只 要 测试 条 件 成 熟 了 ， 
测试 准备 活动 完成 了 ,测试 执行 活动 就 可 以 (或 者 说 需要 ) 进 行 了 。 

模型 揭示 了 一 个 原理 : 软件 测试 是 一 个 独立 的 流程 ,贯穿 产品 整个 生命 周期 ,与 其 他 流 
程 并 发 地 进行 。H 模型 指出 软件 测试 要 尽早 准备 ,尽早 执行 。 不 同 的 测试 活动 可 以 是 按照 某 
个 次 序 先后 进行 的 ,但 也 可 能 是 反复 的 ,只 要 某 个 测试 达到 准备 就 绪 点 ,测试 执行 活动 就 可 以 
开展 。 

4. 前 置 模型 

前 置 测试 模型 则 体现 了 开发 与 测试 的 结合 ,要 求 对 每 一 个 交付 内 容 进行 测试 。 前 置 测 试 
模型 是 一 个 将 测试 和 开发 紧密 结合 的 模型 ,此 模型 将 开发 和 测试 的 生命 周期 整合 在 一 起 ,伴随 


项 目 开发 生命 周期 从 开始 到 结束 的 每 个 关键 行为 ,如 图 1-18 所 示 。 
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图 1-18 前 置 测试 模型 


前 置 测 试 模型 体现 了 以 下 的 要 点 : 

1) 开发 和 测试 相 结合 

前 置 测试 模型 将 开发 和 测试 的 生命 周期 整合 在 一 起 ,标识 了 项 目 生 命 周期 从 开始 到 结束 
之 间 的 关键 行为 ,并 且 表 示 了 这 些 行为 在 项 目 周期 中 的 价值 所 在 。 如 果 其 中 有 些 行为 没有 得 
到 很 好 的 执行 ,那么 项 目 成 功 的 可 能 性 就 会 因此 而 有 所 降低 。 如 果 有 业务 需求 , 则 系统 开发 过 
程 将 更 有 效率 。 在 没有 业务 需求 的 情况 下 进行 开发 和 测试 是 不 可 能 的 ,而 且 业 务 需求 最 好 在 
设计 和 代码 阶段 之 前 就 被 正确 定义 。 

2) 对 每 一 个 交付 内 容 进 行 测试 

每 一 个 交付 的 开发 结果 都 必须 通过 一 定 的 方式 进行 测试 。 源 程序 代码 并 不 是 唯一 需要 测 
试 的 内 容 。 图 1-18 中 的 颜色 较 深 框 表示 了 其 他 一 些 要 测试 的 对 象 ,包括 可 行 性 报告 ,业务 需 
求 说 明 书 以 及 系统 设计 文档 等 。 这 同 V 模型 中 开发 和 测试 的 对 应 关系 是 相 一 致 的 ,并 且 在 其 
基础 上 有 所 扩展 , 变 得 更 为 明确 。 前 置 测试 模型 包括 两 项 测试 计划 技术 

(1) 开发 基于 需求 的 测试 用 例 。 这 并 不 仅仅 是 为 以 后 提交 上 来 的 程序 的 测试 做 好 初始 化 
准备 ,也 是 为 了 验证 需求 是 否 是 可 测试 的 。 这 些 测试 可 以 交 由 用 户 进行 验收 测试 ,或 者 由 开发 
部 门 做 某 些 技术 测试 。 很 多 测试 团体 都 认为 ,需求 的 可 测试 性 即使 不 是 需求 首要 的 属性 ,也 应 
是 其 最 基本 的 属性 之 一 。 因 此 ,在 必要 的 时 候 可 以 为 每 一 个 需求 编写 测试 用 例 。 不 过 ,基于 需 
求 的 测试 最 多 也 只 是 和 需求 本 身 一 样 重要 。 一 项 需求 可 能 本 身 是 错误 的 ,但 它 仍 是 可 测试 的 。 
而 且 , 无 法 为 一 些 被 忽略 的 需求 来 编写 测试 用 例 。 

(2) 定义 验收 标准 。 在 接受 交付 的 系统 之 前 ,用 户 需要 用 验收 标准 来 进行 验证 。 验 收 标 
准 并 不 仅仅 是 定义 需求 ,还 应 在 前 置 测试 之 前 进行 定义 ,这 将 帮助 揭示 某 些 需求 是 否 正 确 , 以 


及 某 些 需求 是 否 被 忽略 了 。 

同样 的 ,系统 设计 在 投入 编码 实现 之 前 也 必须 经 过 测试 ,以 确保 其 正确 性 和 完整 性 。 很 多 
组 织 趋 向 于 对 设计 进行 测试 ,而 不 是 对 需求 进行 测试 。Goldsmith 曾 提供 过 15 项 以 上 的 测试 
方法 来 对 设计 进行 测试 ,企业 或 组 织 也 只 使 用 了 其 中 很 小 的 一 部 分 。 在 对 设计 进行 的 测试 中 
有 一 项 非常 有 用 的 技术 , 即 评审 技术 。 同 时 ,制定 计划 以 确定 应 如 何 针对 提交 的 设计 进行 测 
试 ,这 在 处 于 设计 阶段 并 即将 进入 编码 阶段 时 十 分 有 用 。 

3) 在 设计 阶段 进行 计划 和 测试 设计 

设计 阶段 是 做 测试 计划 和 测试 设计 的 最 好 时 机 。 很 多 组 织 要 么 根本 不 做 测试 计划 和 测试 
设计 ,要 么 在 即将 开始 执行 测试 之 前 才 飞 快 地 完成 测试 计划 和 设计 。 在 这 种 情况 下 ,测试 只 是 
验证 了 程序 的 正确 性 ,而 不 是 验证 整个 系统 本 该 实现 的 东西 。 

在 V 模 型 中 ,验收 测试 最 早 被 定义 好 ,并 在 最 后 执行 ,以 验证 所 交付 的 系统 是 否 真 正 符 
合用 户 业 务 的 需求 。 与 V 模型 不 同 的 是 ,前 置 测试 模型 认识 到 验收 测试 需要 考虑 对 定义 基 
于 需求 的 测试 ,以 及 定义 验收 标准 及 系统 设计 是 否 完成 ,因为 验收 测试 计划 需要 参考 系统 
的 设计 。 

技术 方面 的 测试 主要 是 针对 开发 代码 的 测试 ,例如 V 模型 中 所 定义 的 动态 的 单元 测试 、 
集成 测试 和 系统 测试 。 另 外 ,前 置 测试 还 提示 我 们 应 增加 静态 审查 ,以 及 独立 的 QA 测试 。 
QA 测试 通常 跟随 在 系统 测试 之 后 ,从 技术 部 门 的 意见 和 用 户 的 预期 方面 出 发 ,进行 最 后 的 检 
查 。 同 样 的 还 有 非 功能 性 测试 ,这 些 测试 包括 负载 测试 .安全 性 测试 和 可 用 性 测试 等 ,这 些 测 
试 不 是 由 业务 收 辑 和 应 用 来 驱动 的 。 对 技术 方面 测试 最 基本 的 要 求 是 验证 代码 的 编写 和 设计 
的 要 求 是 否 相 一 致 。 

4) 测试 和 开发 结合 在 一 起 

前 置 测试 将 测试 执行 和 开发 结合 在 一 起 ,并 在 开发 阶段 以 编码 一 测试 一 编码 一 测试 的 方 
式 来 体现 。 也 就 是 说 ,程序 片段 一 旦 编写 完成 ,就 会 立即 进行 测试 。 普 通 情况 下 ,先进 行 的 测 
试 是 单元 测试 ,因为 开发 人 员 认 为 通过 测试 来 发 现 缺 陷 是 最 经 济 的 方式 。 在 技术 测试 计划 中 
必须 定义 好 测试 和 开发 如 何 结合 。 测 试 的 主体 方法 和 结构 应 在 设计 阶段 定义 完成 ,并 在 开发 
阶段 进行 补充 和 升级 。 这 尤其 会 对 基于 代码 的 测试 产生 影响 ,这 种 测试 主要 包括 针对 单元 的 
测试 和 集成 测试 。 总 之 ,如 果 在 执行 测试 之 前 做 一 点 计划 和 设计 ,都 会 提高 测试 效率 ,改善 测 
试 结果 ,而 且 对 测试 复 用 也 更 加 有 利 。 

5) 让 验收 测试 和 技术 测试 保持 相互 独立 

验收 测试 应 该 独立 于 技术 测试 ,这 样 可 以 提供 双重 的 保险 ,以 保证 设计 及 程序 编码 能 够 符 
合 最 终 用 户 的 需求 。 验 收 测试 既 可 以 在 实施 阶段 的 第 一 步 来 执行 ,也 可 以 在 开发 阶段 的 最 后 
一 步 执行 。 

前 置 测试 模型 提倡 验收 测试 和 技术 测试 沿 循 两 条 不 同 的 路 线 来 进行 ,每 条 路 线 分 别 地 验 
证 系统 是 否 能 够 如 预期 的 设想 进行 正常 工作 。 这 样 , 当 单独 设计 好 的 验收 测试 完成 了 系统 的 
验证 , 即 可 确信 这 是 一 个 正确 的 系统 。 

6) 反复 交替 的 开发 和 测试 

在 项 目 中 从 很 多 方面 可 以 看 到 变更 的 发 生 , 例 如 需要 重新 访问 前 一 阶段 的 内 容 , 或 者 跟踪 
并 纠正 以 前 提交 的 内 容 ,修复 缺陷 ,排除 多 余 的 成 分 ,以 及 增加 新 发 现 的 功能 等 。 开 发 和 测试 
需要 一 起 反复 交替 地 执行 。 该 模型 并 没有 明确 指出 参与 的 系统 部 分 的 大 小 ,这 一 点 和 V 模型 
中 所 提供 的 内 容 相似 。 不 同 的 是 ,前 置 测试 模型 对 反复 和 交 蔡 进行 了 非常 明确 的 描述 。 


7) 发 现 内 在 的 价值 

前 置 测试 能 给 需要 使 用 测试 技术 的 开发 人 员 、 测 试 人 员 、 项 目 经 理 和 用 户 等 带 来 很 多 不 同 
于 传统 方法 的 内 在 的 价值 。 与 以 前 的 方法 中 很 少 划分 优先 级 所 不 同 的 是 ,前 置 测试 用 较 低 的 
成 本 来 及 早 发 现 缺 陷 , 并 且 充 分 强调 了 测试 对 确保 系统 的 高 质量 的 重要 意义 。 前 置 测试 代表 
了 对 测试 的 新 的 不 同 的 观念 。 在 整个 开发 过 程 中 ,反复 使 用 了 各 种 测试 技术 以 使 开发 人 员 、 经 
理 和 用 户 节省 其 时 间 , 简 化 其 工作 。 

通常 情况 下 ,开发 人 员 会 将 测试 工作 视 为 阻碍 其 按期 完成 开发 进度 的 额外 负担 。 然 而 , 当 
提前 定义 好 该 如 何 对 程序 进行 测试 以 后 ,我 们 会 发 现 开 发 人 员 将 节省 至 少 20%% 的 时 间 。 虽 然 
开发 人 员 可 能 很 少 意识 到 他 们 的 时 间 是 如 何 分 配 的 ,也 许 他 们 只 是 感觉 到 有 一 大 块 时 间 从 重 
新 修改 中 节省 下 来 可 用 来 进行 其 他 的 开发 。 保 守 地 说 ,在 编码 之 前 对 设计 进行 测试 可 以 节省 
总 共 将 近 一 半 的 时 间 , 这 可 以 从 以 下 方面 体现 出 来 : 
针对 设计 的 测试 是 检验 设计 的 一 个 非常 好 的 方法 ,由 此 可 以 及 时 避免 因为 设计 不 正确 
而 造成 的 重复 开发 及 代码 修改 。 通 常情 况 下 ,这 样 的 测试 可 以 使 设计 中 的 逻辑 缺陷 凸 
显 出 来 。 另 一 方面 ,设计 测试 用 例 还 能 揭示 设计 中 比较 模糊 的 地 方 。 总 的 来 说 ,如 果 
不 能 勾画 出 如 何 对 程序 进行 测试 ,那么 程序 员 很 可 能 也 很 难 确定 他 们 所 开发 的 程序 怎 
样 才 算 是 正确 的 。 
测试 工作 先 于 程序 开发 而 进行 ,这 样 可 以 明显 地 看 到 程序 应 该 如 何 工作 ; 否则 ,如 果 
要 等 到 程序 开发 完成 后 才 开 始 测 试 ,那么 测试 只 是 查验 开发 人 员 的 代码 是 如 何 运 行 
的 。 而 提前 的 测试 可 以 帮助 开发 人 员 立 刻 定位 缺陷 。 
在 测试 先 于 编码 的 情况 下 ,开发 人 员 可 以 在 完成 编码 时 就 立刻 进行 测试 ,而 且 会 更 有 
效率 。 在 同一 时 间 内 能 够 执行 更 多 的 现成 的 测试 ,测试 人 员 的 思路 也 不 会 因为 去 搜集 
测试 数据 而 被 打 断 。 
即使 是 最 好 的 程序 员 , 从 他 们 各 自 的 观念 出 发 ,也 常常 会 对 一 些 看 似 非常 明确 的 设计 
说 明 产 生 不 同 的 理解 。 如 果 他 们 能 参考 到 测试 的 输入 数据 及 输出 结果 要 求 , 就 可 以 帮 
助 他 们 及 时 纠正 理解 上 的 误区 ,使 其 在 一 开始 就 编写 出 正确 的 代码 。 
前 置 测试 定义 了 如 何在 编码 之 前 对 程序 进行 测试 设计 ,开发 人 员 一 旦 体会 到 其 中 的 价 
值 ,就 会 对 其 表现 出 特别 的 欣赏 。 前 置 方法 不 仅 能 节省 时 间 ,而 且 可 以 减少 那些 令 他 
们 十 分 厌恶 的 重复 工作 。 


1.8 软件 测试 的 类 型 


软件 测试 类 型 广义 上 说 就 两 种 : 功能 性 测试 和 非 功能 性 测试 。 从 测试 的 技术 上 来 划分 可 
分 为 黑 盒 测试 (功能 性 测试 ) 白 盒 测 试 (结构 性 测试 ) 和 介 于 黑 盒 和 白 盒 之 间 的 灰 盒 测试 。 按 
照 测 试 阶段 划分 可 分 为 单元 测试 .集成 测试 ,系统 测试 和 验收 测试 。 按 照 测 试 的 实施 组 织 可 划 
分 为 开发 方 测试 .用户 测试 和 第 三 方 测试 。 按 照 测 试 的 方式 划分 可 分 为 静态 测试 和 动态 测试 。 
关于 测试 的 类 型 ,根据 不 同 的 分 类 方法 能 够 分 出 几 十 种 ,因为 软件 测试 技术 还 处 于 不 断 的 发 展 
阶段 ,类 型 划分 还 不 统一 ,所 以 ,作为 测试 人 员 遇 到 一 些 没有 接触 过 的 类 型 ,知道 该 种 测试 类 型 
的 测试 目的 和 测试 角度 就 可 以 了 。 

软件 的 功能 需求 指明 软件 必须 执行 的 功能 ,定义 系统 的 行为 , 即 软件 在 某 种 输入 条 件 下 要 
给 出 确定 的 输出 必须 做 的 处 理 或 转换 。 功 能 需求 通常 是 软件 功能 的 “硬指标 ”, 如 “支持 分 布 式 


环境 中 消息 的 可 靠 传 输 ”“ 数 据 传输 必须 进行 动态 加 密 ” 等 ; 非 功能 需求 不 描述 软件 做 什么 ， 
描述 软件 如 何 做 。 非 功能 需求 通常 作为 软件 设计 的 “ 软 指标 ”, 如 “系统 具有 可 伸缩 性 ”“ 安 全 
性 ”等 。 为 此 ,可 以 把 功能 需求 对 应 的 功能 称 为 “功能 性 特征 ”, 把 非 功 能 需求 对 应 的 功能 称 为 
“ 非 功能 性 特征 ”。 

依据 相关 软件 产品 测试 评判 标准 ,从 功能 上 .安全 性 、 可 靠 性 、 易 用 性 、 速 度 、 资 源 占用 率 、 
兼容 性 、 可 扩充 性 、 用 户 文档 和 用 户 满意 度 调查 10 个 质量 特性 进行 测试 ,是 对 产品 进行 全 面 的 
测试 评价 , 即 通过 功能 性 测试 和 非 功能 性 测试 来 实现 。 源 代码 测试 包括 对 代码 结构 ,代码 可 维 
护 性 、 功 能 度 .代码 覆盖 率 和 内 存 分 配 5 个 方面 进行 测试 ,这 些 测 试 可 以 通过 功能 性 和 非 功能 
性 及 白 盒 测试 来 实现 。 通 过 代码 走 查 、 覆 盖 率 分 析 \ 内 存 分 析 等 手段 对 代码 的 覆盖 和 优化 进行 
评估 ,降低 不 规范 编码 带 来 的 风险 ,以 提高 代码 的 可 读 性 和 可 维护 性 ,可 以 通过 白 盒 测试 和 静 
态 测试 ( 走 查 ,评审 等 ) 来 实现 。 


1.8.1 功能 性 测试 


功能 性 测试 是 基于 软件 产品 功能 方面 的 测试 , 既 可 以 用 于 单元 级 别 , 也 可 以 用 于 集成 和 系 
统 测试 级 别 。 功 能 性 测试 不 考虑 程序 的 具体 执行 路 径 , 仅 关注 功能 是 否 实现 。 

功能 测试 ,又 称 为 黑 盒 测试 或 数据 驱动 测试 ,是 把 测试 对 象 看 作 一 个 黑 盒 子 。 利 用 黑 盒 测 
试 法 进行 动态 测试 时 ,需要 测试 软件 产品 的 功能 ,不 需 测 试 软件 产品 的 内 部 结构 和 处 理 过 程 。 
采用 黑 盒 技术 设计 测试 用 例 的 方法 有 等 价 类 划分 .边界 值 分 析 \ 决 策 表 法 、 正 交 实 验 法 和 场景 
法 等 。 这 些 具体 的 设计 方法 将 在 后 续 章 节 中 详 述 。 

黑 盒 测试 注重 于 测试 软件 的 功能 性 需求 。 黑 盒 测试 并 不 是 白 盒 测 试 的 蔡 代 品 ,而 是 和 和 白 
盒 测 试 有 着 互补 的 效果 ,发现 白 盒 测试 不 能 发 现 的 缺陷 。 黑 盒 测 试 试图 发 现 以 下 类 型 的 错误 
或 缺陷 : 

。 功能 错误 或 遗漏 ， 

。 界面 错误 ; 

。 数据 结构 或 外 部 数据 库 访问 错误 ; 

。 性 能 错误 ; 

。 初始 化 和 终止 错误 。 

采用 黑 盒 测试 方法 设计 测试 用 例 , 所 使 用 的 唯一 信息 就 是 软件 的 规格 说 明 书 。 黑 盒 测试 
用 例 具有 两 个 显著 的 特点 : 

(1) 黑 盒 测试 与 软件 如 何 实现 无 关 , 所 以 如 果 软 件 的 实现 发 生变 化 , 黑 盒 测 试用 例 仍然 
有 用 。 

(2) 测试 用 例 的 分 析 和 设计 与 软件 实现 可 以 并 行 , 因 此 可 压缩 总 的 项 目 开 发 时 间 。 

在 缺点 方面 , 黑 盒 测试 用 例 也 常常 会 带 来 两 个 方面 的 问题 : 测试 用 例 之 间 可 能 存在 严重 
的 宛 余 ,此 外 可 能 还 会 有 未 测试 的 软件 功能 漏洞 。 

黑 盒 测试 的 缺点 是 测试 的 结果 取决 于 测试 用 例 的 设计 ,测试 用 例 的 设计 部 分 来 源 于 经 验 、 
测试 技术 的 运用 和 对 被 测试 系统 业务 的 了 解 等 。 黑 盒 测 试 目前 还 很 难 做 到 针对 被 测试 程序 的 
状态 转换 来 测试 造成 系统 崩溃 的 原因 。 


1.8.2 非 功能 性 测试 
一 个 软件 产品 除了 具有 功能 性 的 特性 之 外 ,还 具有 一 些 非 功 能 性 的 特性 ,所 以 , 除 功能 性 


测试 外 ,应 该 包含 软件 产品 的 非 功能 性 需求 的 测试 。 非 功能 性 测试 主要 是 基于 产品 的 性 能 、 负 
载 , 可 用 性 、 交 互 性 、 可 维护 性 ,安全 性 、 可 靠 性 及 可 移植 性 等 方面 的 测试 。 还 应 该 包括 测试 
产品 是 否 遵 从 指定 的 标准 、 规 范 和 约束 ,以 及 操作 界面 的 具体 细节 和 构造 上 的 限制 等 。 尽 
管 在 大 多 数 项 目 中 能 够 对 功能 性 测试 进行 良好 的 测试 ,但 是 对 非 功 能 性 测试 却 存在 一 定 的 
难度 。 因 此 ,在 进行 功能 性 测试 的 同时 ,需要 在 测试 生命 周期 的 每 一 个 阶段 都 重视 非 功能 
性 测试 。 

典型 的 非 功能 性 测试 包括 : 
配置 /安装 测试 : 用 来 保证 正确 安装 硬件 和 软件 ,创建 所 有 必需 的 文件 和 连接 ,加 载 所 
有 适当 的 数据 文件 (如 数据 库 或 历史 信息 ) ,正确 地 设置 系统 默认 值 以 及 与 其 他 系统 或 
外 设 的 接口 都 能 正常 工作 。 
兼容 性 测试 : 用 于 验证 当 被 测 应 用 运行 在 真实 的 环境 下 时 , 它 的 操作 不 会 对 其 他 系统 
产生 不 利 的 影响 ,反之 亦 然 。 
文档 和 帮助 测试 : 应 当 检查 用 户 文档 和 帮助 信息 与 需求 规格 说 明文 档 的 一 致 性 ,包括 
文档 评审 、 交 又 引用 检查 等 。 
故障 恢复 测试 : 用 于 验证 当 被 测 应 用 出 现 故 障 或 异常 后 (如 断 电 ) 能 否 恢 复 到 “正常 ” 
可 靠 性 测试 : 用 于 保证 被 测 应 用 在 典型 的 环境 下 使 用 的 健壮 性 和 可 靠 性 。 
保密 性 测试 : 根据 被 测 软 件 的 保密 性 要 求 ,对 保证 数据 和 软件 的 机 密 性 、 可 用 性 和 完 
整 性 的 需求 而 进行 的 测试 。 目 的 是 要 测试 软件 所 实现 的 特性 是 否 提 供 了 对 数据 等 所 
需 级 别 的 保护 。 
压力 测试 : 用 于 检查 系统 在 瞬间 峰值 负荷 下 正确 执行 的 能 力 。 目 的 是 识别 出 那些 只 
有 在 这 样 的 不 利 条 件 下 才 出 现 的 错误 或 缺陷 。 压 力 测 试 就 是 一 种 验证 软件 系统 极限 
能 力 的 性 能 测试 。 压 力 测 试 与 负载 测试 的 区 别 在 于 负载 测试 需要 进行 多 次 的 测试 和 
记录 ,例如 随 着 并 发 的 虚拟 用 户 数 的 增加 ,系统 的 响应 时 间 、 内 存 使 用 .CPU 使 用 情况 
等 方面 的 变化 如 何 。 压 力 测试 的 目的 很 明确 ,就 是 要 找到 系统 的 极限 点 。 在 系统 崩溃 
或 与 指定 的 性 能 指标 不 符 时 的 点 就 是 软件 系统 的 极限 点 。 实 际 上 ,在 做 性 能 测试 的 过 
程 中 不 会 严格 区 分 这 些 概念 ,它们 的 界限 有 些 模糊 。 对 于 测试 人 员 来 说 ,更 关心 的 是 
如 何 满足 性 能 需求 ,如 何 进 行 性 能 测试 。 
性 能 测试 : 系统 的 性 能 是 否 满足 需求 规定 的 各 种 指标 ,比如 吞吐 率 或 者 响应 时 间 等 。 
在 需求 规约 的 描述 中 经 常 碰 到 对 性 能 需求 描述 明确 或 不 明确 的 情况 。 无 论 需求 规约 
中 对 性 能 需求 描述 是 明确 还 是 不 明确 ,分 析 和 设计 以 及 代码 人 员 均 应 该 根据 所 开发 软 
件 的 具体 情况 考虑 系统 的 性 能 。 对 于 不 明确 的 性 能 需求 ,通常 需要 进行 的 不 是 极限 测 
试 ,而 是 负载 测试 ,需要 逐 级 验证 系统 在 每 一 个 数据 量 和 并 发 量 的 情况 下 的 性 能 响应 ， 
然后 综合 分 析 系统 的 性 能 表现 形式 。 


1.8.3 软件 结构 性 测试 

白 盒 测试 (又 称 逻 辑 驱动 测试 ,结构 性 测试 ) 是 把 测试 对 象 看 作 一 个 打开 的 盒子 。 利 用 和 白 
盒 测 试 法 进行 动态 测试 时 ,可 通过 测试 来 检测 软件 产品 内 部 动作 是 否 按照 规格 说 明 书 的 规定 
正常 进行 ,按照 程序 内 部 的 结构 测试 程序 ,检验 程序 中 的 通路 (路 径 ) 是 否 都 有 可 能 按 预 订 的 要 
求 正确 工作 ,而 不 考虑 其 功能 性 。 白 盒 测试 的 主要 方法 有 逻辑 驱动 、. 基 路 径 测试 等 ,主要 用 于 


软件 验证 。 白 盒 测试 法 的 覆盖 标准 有 逻辑 覆盖 、 循 环 覆 盖 和 基 路 径 覆 盖 。 其 中 旭 辑 覆盖 包括 
语句 覆盖 、 判 ( 断 ) 定 覆盖 条 件 覆 盖 、 判 ( 断 ) 定 /条 件 覆 盖 和 条 件 组 合 覆 盖 。 这 5 种 覆盖 标准 发 
现 缺 陷 的 能 力 呈 由 弱 至 强 的 变化 。 语 句 覆 盖 即 每 条 语句 至 少 执行 一 次 ; 判定 覆盖 即 每 个 判定 
的 每 个 分 支 至 少 执行 一 次 ; 条 件 覆 盖 即 每 个 判定 的 每 个 条 件 应 取 到 各 种 可 能 的 值 ; 判定 /条 
件 覆 盖 同 时 满足 判定 覆盖 和 条 件 覆 盖 ; 条 件 组 合 覆 盖 即 每 个 判定 中 各 条 件 的 每 一 种 组 合 至 少 
覆盖 一 次 。 另 外 基 路 径 覆 盖 是 使 程序 中 满足 条 件 的 基 路 径 至 少 执行 一 次 。 这 些 白 盒 测试 方法 
在 后 面 章节 中 将 做 详细 分 析 。 

白 盒 测试 法 需要 全 面 了 解 程序 内 部 逮 辑 结构 ,对 所 有 逻辑 路 径 进行 分 析 .“ 白 盒 法 是 研 
究 路 径 的 测试 。 在 使 用 这 一 方法 时 ,测试 者 必须 检查 程序 的 内 部 结构 ,从 检查 程序 的 迎 辑 着 
手 ,得 出 测试 数据 。 贯 穿 程序 的 独立 路 径 数 可 能 是 天 文 数字 ,但 即使 每 条 路 径 都 测试 了 仍然 可 
能 存在 缺陷 。 第 一 ,即使 穷 举 路 径 测 试 也 不 能 查 出 程序 违反 了 设计 规范 , 即 程序 本 身 是 个 错误 
的 程序 ; 第 二 , 穷 举 路 径 测试 不 可 能 查 出 程序 中 因 遗 漏 路 径 而 出 错 的 情况 ; 第 三 , 穷 举 路 径 测 
试 可 能 发 现 不 了 一 些 与 数据 相关 的 错误 或 缺陷 。 


1.8.4 变更 相关 的 测试 (再 测试 和 回归 测试 ) 


当 一 个 缺陷 被 发 现 并 被 修正 之 后 ,软件 应 该 重新 进行 测试 ( 称 再 测试 ) 以 确保 原来 的 缺陷 
成 功 地 被 消除 。 当 软件 相关 模块 (组 件 或 类 ) 修 改 以 后 或 软件 系统 增加 了 相关 模块 (组 件 或 
类 ), 为 了 确保 软件 的 正确 性 ,也 必须 对 相关 模块 进行 回归 测试 。 

每 当 一 个 新 的 模块 或 类 被 当做 集成 测试 的 一 部 分 加 进来 的 时 候 , 软 件 就 发 生 了 改变 。 新 
的 数据 流 路 径 建立 起 来 ,新 的 输入 输出 (IO) 操 作 可 能 也 会 出 现 , 还 有 可 能 激活 新 的 控制 多 
辑 。 这 些 改变 可 能 会 使 原本 工作 得 很 正常 的 软件 功能 产生 缺陷 。 在 集成 测试 策略 的 背景 环境 
中 ,回归 测试 是 对 某 些 已 经 进行 过 测试 的 某 些 子 集 再 重新 进行 测试 ,以 保证 上 述 改变 不 会 传播 
无 法 预料 的 副作用 。 在 更 广 的 测试 背景 环境 中 ,如 单元 测试 ,系统 测试 等 测试 工作 结束 后 , 测 
试 结果 都 会 发 现 缺 陷 ,而 缺陷 是 要 被 修正 的 ,每 当 软 件 被 修改 的 时 候 ,相关 的 软件 配置 (程序 、 
文档 或 者 数据 ) 也 可 能 被 修改 ,回归 测试 就 是 用 来 保证 改动 不 会 带 来 不 可 预料 的 行为 或 者 另外 
的 缺陷 。 

回归 测试 可 以 通过 重新 执行 所 有 的 测试 用 例 集 或 所 有 测试 用 例 集 的 一 个 子 集 , 通 过 人 工 
来 进行 测试 ,也 可 以 使 用 自动 化 的 捕获 回放 工具 来 进行 测试 。 捕 获 回放 工具 使 得 软件 测试 工 
程 师 能 够 捕获 到 测试 用 例 , 然 后 就 可 以 进行 回放 和 上 比较。 回归 测试 集 一 般 包 括 三 种 不 同类 型 
的 测试 用 例 : 

。 能 够 测试 软件 所 有 功能 的 具有 代表 性 的 测试 用 例 ; 

。 专门 针对 可 能 因为 被 修改 而 影响 某 些 软 件 功能 的 附加 测试 用 例 ; 

。 针对 修改 过 的 软件 部 分 的 测试 用 例 。 

在 集成 测试 进行 的 过 程 中 ,回归 测试 工作 量 可 能 会 变 得 非常 庞大 。 因 此 ,在 进行 回归 测试 
的 设计 时 应 当 只 涉及 那些 和 发 现 缺 隐 有 关 的 或 可 能 会 受 影响 的 模块 或 类 来 进行 测试 。 每 当 进 
行 一 个 修改 时 ,就 对 每 一 个 程序 功能 都 重新 执行 所 有 的 测试 用 例 是 不 实际 的 ,而 且 效 率 是 很 
低 的 。 

在 实际 工作 中 ,回归 测试 需要 反复 进行 , 当 测试 者 一 次 又 一 次 地 完成 相同 的 测试 时 ,这 些 
回归 测试 将 变 得 非常 令 人 厌烦 ,而 大 多 数 回归 测试 需要 手工 完成 的 时 候 尤 其 如 此 ,因此 ,需要 
通过 自动 测试 来 实现 重复 的 和 一 致 的 回归 测试 。 通 过 测试 自动 化 可 以 提高 回归 测试 效率 。 为 


了 支持 多 种 回归 测试 策略 ,自动 测试 工具 应 该 是 通用 的 和 灵活 的 ,以 便 满足 不 同 回归 测试 目标 
的 要 求 。 

在 组 织 回 归 测 试 时 需要 注意 两 点 : 首先 是 各 测试 阶段 发 生 的 修改 一 定 要 在 本 测试 阶段 内 
完成 回归 ,以 免 将 缺陷 遗留 到 下 一 测试 阶段 。 其 次 ,回归 测试 期 间 应 对 该 软件 版 本 冻结 ,将 回 
归 测 试 发 现 的 问题 集中 修改 ,集中 回归 。 在 实际 工作 中 ,可 以 将 回归 测试 与 兼容 性 测试 结合 起 
来 进行 。 在 新 的 配置 条 件 下 运行 旧 的 测试 可 以 发 现 兼 容 性 问题 ,而 同时 也 可 以 揭示 编码 在 回 
归 方面 的 缺陷 。 

回归 测试 适用 于 任何 测试 级 别 。 


1.9 基本 的 软件 测试 过 程 


软件 测试 的 基本 过 程 包括 软件 测试 计划 ,测试 分 析 和 设计 ,测试 实施 、 执 行 和 监控 ,测试 报 
告 及 测试 结束 活动 等 方面 。 

软件 测试 计划 一 般 开 始 于 软件 需求 分 析 结 束 阶段 ,计划 应 该 指明 测试 范围 .方法 、 资 源 以 
及 相应 测试 活动 的 时 间 进 度 安排 表 。 具 体 应 该 包含 测试 目标 、 项 目 概 述 、 组 织 形式 、 角 色 及 职 
责 ,测试 对 象 ,测试 通过 和 失败 的 标准 (测试 何 时 结束 、 度 量 的 尺度 如 何 、 度 量 的 评价 标准 等 )、 
测试 挂 起 的 标准 及 恢复 测试 的 必要 条 件 、 测 试 任务 的 安排 ,应 交付 的 测试 工作 产品 .工作 量 估 
计 及 退出 测试 的 标准 等 。 

退出 测试 的 标准 可 以 通过 几 个 方面 考虑 ,如 计划 中 的 测试 用 例 是 否 执行 完毕 ,是 否 达到 功 
能 .语句 等 计划 的 覆盖 指标 ,继续 测试 发 现 缺 陷 的 数量 减少 低 于 度量 标准 等 。 

软件 测试 计划 的 制定 不 是 不 变 的 ,在 软件 测试 的 过 程 中 由 于 多 种 原因 (计划 本 身 的 不 完 
善 \ 时 间 因 素 ,技术 因素 等 ) 可 能 导致 对 测试 计划 的 调整 ,这 也 是 测试 控制 的 一 个 重要 方面 。 

测试 的 分 析 和 设计 首先 要 有 其 分 析 和 设计 的 依据 ,在 软件 测试 的 不 同 阶段 测试 分 析 的 依 
据 是 不 同 的 ,在 单元 测试 阶段 分 析 的 依据 是 详细 设计 规约 ,在 集成 测试 阶段 分 析 的 依据 是 概要 
设计 规约 ,在 系统 测试 阶段 分 析 的 依据 是 需求 分 析 规 约 , 在 验收 测试 阶段 分 析 的 依据 是 需求 规 
约 。 在 分 析 过 程 中 规约 不 是 唯一 的 依据 ,由 于 软件 开发 过 程 中 的 文档 可 能 不 是 十 分 的 完整 ,这 
就 要 求 测试 分 析 人 员 从 其 他 方面 进行 分 析 作 为 补充 ,在 分 析 的 基础 上 再 进行 测试 用 例 的 设计 。 
测试 用 例 的 设计 可 以 以 需求 .分 析 和 设计 说 明 书 为 基础 并 结合 测试 方法 和 技术 来 进行 ,如 从 软 
件 的 流程 图 、 功 能 点 、 状 态 图 、use-case 图 等 方面 并 结合 白 盒 和 黑 盒 测试 技术 进行 测试 用 例 的 
设计 。 测 试用 例 的 设计 应 该 遵循 从 巡 辑 测试 用 例 到 实际 测试 用 例 的 设计 过 程 , 设 计 测 试用 例 
的 多 少 或 达到 的 覆盖 指标 应 该 充分 考虑 所 测试 的 系统 或 子 系统 或 模块 的 重要 性 ,用 例 的 设计 
同时 要 考虑 用 例 执 行 应 该 具备 的 前 提 条 件 。 

测试 的 实施 和 执行 应 该 具备 一 些 条 件 ,如 测试 环境 的 具备 、 测 试 驱动 器 和 测试 桩 的 开发 完 
成 ,测试 模拟 器 及 测试 工具 的 准备 等 。 在 测试 实施 和 执行 过 程 中 必须 对 测试 结果 进行 记录 ,如 
记录 用 例 运行 是 否 通 过 、 失 败 的 原因 及 原因 的 分 类 、 进 一 步 测 试 的 建议 等 。 在 测试 的 实施 和 执 
行 过 程 中 要 进行 必要 的 监控 ,如 对 测试 的 进度 、 用 例 执行 的 成 功率 ,测试 资源 及 测试 人 员 的 能 
力 等 进行 监控 ,以 便 适 时 地 调整 计划 。 

测试 结束 活动 主要 涉及 对 测试 结果 的 分 析 , 如 对 测试 发 现 的 缺陷 进行 统计 分 类 并 分 析 其 
原因 ,制定 的 测试 计划 和 实际 的 计划 执行 的 差距 并 分 析 原 因 ,在 测试 过 程 中 哪些 事件 或 风险 没 
预料 到 ,测试 过 程 中 好 的 经 验 总 结 等 。 


练习 


1. 名 称 解释 : 软件 测试 错误、 缺陷 .失效 .回归 测试 . 黑 盒 测试 . 白 盒 测试 .单元 测试 、 集 
成 测试 .系统 测试 .验收 测试 。 
. 分 析 可 能 组 成 测试 用 例 的 所 有 项 ,说 明 这 些 项 的 作用 。 
. 比较 V 模型 、W 模型 和 互 模 型 ,并 说 明 它 们 的 不 同 。 
. 叙述 前 置 模型 的 特点 。 
. 举例 说 明 SQA 和 软件 测试 的 区 别 。 
. 简 述 软件 测试 的 目的 。 
. 简 述 测试 类 型 不 同 的 划分 。 
. 简 述 软件 测试 的 基本 过 程 。 
. 软件 测试 的 基本 原则 有 哪些 ? 
10. 举例 说 明 软 件 不 能 进行 穷尽 测试 。 


oldnwy 


静态 测试 技术 


2.1 静态 测试 技术 概要 


软件 工作 产品 可 以 通过 不 同 的 静态 技术 进行 检查 以 评估 工作 产品 
的 质量 ,而 这 种 静态 技术 不 同 于 软件 的 动态 测试 技术 。 静 态 测试 是 相对 
于 动态 测试 而 言 的 , 即 不 要 求 在 计算 机 上 实际 执行 所 测试 的 软件 而 进行 
的 测试 。 静 态 测试 主要 以 一 些 人 工 的 模拟 技术 对 软件 进行 分 析 和 测试 ， 
静态 测试 有 时 也 称 静 态 白 盒 测试 , 它 包括 各 种 对 需求 规约 ,分 析 和 设计 
规约 、 代 码 及 开发 过 程 中 的 各 种 文档 的 检查 、 静 态 结构 分 析 等 。 静 态 测 
试 可 以 是 由 人 工 进行 ,充分 发 挥 人 的 人 逻辑 思维 优势 ,也 可 以 借助 软件 工 
具 自 动 进行 。 据 此 ,静态 测试 可 以 分 为 评审 和 工具 支持 的 静态 测试 技 
术 。 相 对 于 动态 测试 而 言 ,静态 测试 成 本 更 低 ,效率 较 高 ,更 重要 的 是 可 
以 在 软件 开发 生命 周期 早期 阶段 通过 静态 测试 技术 发 现 软件 的 缺陷 。 
静态 测试 技术 是 一 种 非常 有 效 的 重要 测试 技术 。 


2.2 评审 技术 概述 


2.2.1 评审 的 定义 和 类 型 


评审 是 指 由 软件 工作 产品 生产 者 的 同行 遵循 已 定义 的 规程 对 软件 
工作 产品 所 做 的 审查 ,目的 在 于 识别 工作 产品 的 错误 或 缺陷 及 需要 改进 
之 处 。 

评审 是 一 个 总 体 的 概念 ,在 实际 执行 时 评审 有 不 同 的 组 织 形式 ,有 
严格 的 ,也 有 松散 的 。 根 据 具体 情况 的 不 同 , 可 以 把 评审 分 为 非 正式 评 
审 和 正式 评审 。 

非 正 式 评 审 是 指 工作 产品 没有 完成 ,正在 开发 中 ,不 需要 遵循 明确 
定义 的 评审 过 程 的 情况 。 正 式 评审 是 指 作者 已 经 确认 工作 产品 已 经 完 
成 ,评审 将 遵循 一 个 已 经 明确 定义 的 过 程 ,参与 评审 的 人 员 有 明确 的 职 
责 与 检查 表 (checklist)。 不 同 的 评审 角色 明确 定义 了 进入 评审 与 完成 
评审 的 准则 。 


其 中 正式 评审 根据 评审 对 象 , 评 审 所 关注 的 内 容 等 不 同 ,又 分 为 代码 检查 (包括 桌面 检查 、 
代码 审查 和 走 查 ) ,正规 技术 评审 或 正规 检视 。 


2.2.2 评审 过 程 


评审 的 形式 虽然 不 同 , 但 各 种 评审 都 基本 遵循 一 般 的 过 程 。 评 审 过 程 一 般 包 括 计 划 阶 段 、 
准备 阶段 、 自 评审 阶段 .评审 会 阶段 .重新 修改 阶段 和 分 析 总 结 阶段 。 


2.2.3 责任 和 角色 


在 正式 的 评审 中 一 般 包 括 如 下 角色 : 协调 负责 人 、 作 者 、 记 录 员 、 评 审 者 。 他 们 在 正式 的 
评审 中 承担 不 同 的 责任 。 不 同 的 评审 形式 所 包含 的 角色 及 评审 人 员 数 量 可 能 不 同 。 


2.3 代码 检查 


代码 检查 包括 桌面 检查 .代码 审 查 和 走 查 等 ,主要 检查 代码 和 设计 的 一 致 性 ,代码 对 标准 
的 遵循 、 可 读 性 ,代码 逻辑 表达 的 正确 性 ,代码 结构 的 合理 性 等 方面 ,以 发 现 违背 程序 编写 标准 
的 问题 ,程序 中 不 安全 ,不 明确 和 模糊 的 部 分 , 找 出 程序 中 不 可 移植 部 分 、 违 背 程 序 编程 风格 的 
问题 ,包括 变量 检查 、 命 名 和 类 型 审查 ,程序 逻辑 审查 、 程 序 语法 检查 和 程序 结构 检查 等 内 容 。 


2.3.1 代码 检查 类 型 


1. 桌面 检查 

这 是 一 种 传统 的 检查 方法 ,由 程序 员 检查 自己 编写 的 程序 。 程 序 员 在 程序 通过 编译 之 后 ， 
对 源 程序 代码 进行 分 析 、 检 验 ,并 补充 相关 的 文档 ,目的 是 发 现 程序 中 的 错误 或 缺陷 。 

由 于 程序 员 熟 悉 自 己 的 程序 及 其 程序 设计 风格 ,桌面 检查 由 程序 员 自 己 进行 可 以 节省 很 
多 的 检查 时 间 ,但 应 避免 主观 片面 性 。 

2. 代码 审查 

代码 审查 是 由 若干 程序 员 和 测试 员 组 成 一 个 审查 小 组 ,通过 阅读 .讨论 和 争议 ,对 程序 进 
行 静态 分 析 的 过 程 。 代 码 审 查分 两 步 : 第 一 步 , 小 组 负责 人 提前 把 设计 规格 说 明 书 、 控 制 流程 
图 ,程序 文 本 及 有 关 要 求 、 规 范 等 分 发 给 小 组 成 员 ,作为 审查 的 依据 。 小 组 成 员 在 充分 阅读 这 
些 材 料 后 ,进入 审查 的 第 二 步 , 召 开 程 序 审查 会 。 在 会 上 ,首先 由 程序 员 逐 名 讲解 程序 的 逻辑 。 
在 此 过 程 中 ,程序 员 或 其 他 小 组 成 员 可 以 提出 问题 ,展开 讨论 ,审查 错误 或 缺陷 是 否 存在 。 实 
践 表 明 ,程序 员 在 讲解 过 程 中 能 发 现 许多 原来 自己 没有 发 现 的 错误 或 缺陷 ,而 讨论 和 争议 则 促 
进 了 问题 的 暴露 。 例 如 ,对 某 个 局 部 性 小 问题 修改 方法 的 讨论 ,可 能 发 现 与 之 牵连 的 其 他 问 
题 ,甚至 涉及 模块 的 功能 说 明 、 模 块 间接 口 和 系统 总 体 结构 的 大 问题 ,从 而 导致 对 需求 的 重 定 
义 、 重 设计 和 重 验 证 ,进而 大 大 改善 了 软件 质量 。 

会 前 ,应 当 给 审查 小 组 每 个 成 员 准 备 一 份 常见 错误 或 缺陷 的 清单 ,把 以 往 所 有 可 能 发 生 

的 常见 错误 或 缺陷 罗列 出 来 ,供与 会 者 对 照 检 查 , 以 提高 审查 的 实效 。 

这 个 常见 错误 或 缺陷 清单 也 称 为 检查 表 , 它 把 程序 中 可 能 发 生 的 各 种 错误 或 缺陷 进行 分 
类 ,对 每 一 类 列举 出 尽 可 能 多 的 典型 错误 或 缺陷 ,然后 把 它们 制 成 表格 , 供 再 审查 时 使 用 。 

3. 走 查 

走 查 与 代码 审查 基本 相同 ,其 过 程 分 为 两 步 : 第 一 步 也 是 把 材料 先 发 给 走 查 小 组 每 个 成 


员 ,让 他 们 认真 研究 程序 ,然后 再 开会 。 开 会 的 程序 与 代码 审查 不 同 , 不 是 简单 地 读 程序 和 对 
照 错误 检查 表 进行 检查 ,而 是 让 与 会 者 “充当 ”计算 机 , 即 首先 由 测试 组 成 员 为 所 测 程序 准备 一 
批 有 代表 性 的 测试 用 例 ,提交 给 走 查 小 组 。 走 查 小 组 开会 ,集体 扮演 计算 机 角色 ,让 测试 用 例 
沿 程序 的 逻辑 运行 一 遍 , 随 时 记录 程序 的 踪迹 , 供 分 析 和 讨论 用 。 人 们 借助 测试 用 例 的 媒介 作 
用 ,对 程序 的 逻辑 和 功能 提出 各 种 疑问 ,结合 问题 开展 热烈 的 讨论 和 争议 ,能 够 发 现 更 多 的 
问题 。 
具体 的 走 查 应 当 遵循 以 下 过 程 : 
1) 计划 走 查 会 议 
工作 产品 (程序 ) 的 作者 完成 下 面 工 作 : 
。 通过 选择 一 名 或 多 名 人 员 组 成 走 查 组 。 如 果 需 要 一 个 记录 员 , 相 关 走 查 负 责 人 或 作者 
可 以 指派 这 个 角色 。 
。 安排 走 查 会 议 的 时 间 地 点 。 
。 分 发 所 有 必须 的 走 查 材料 给 评审 人 员 , 例 如 用 于 工作 产品 评审 的 标准 、 检 查 表 及 评审 
产品 。 相 关 走 查 负责 人 或 作者 确定 是 否 需要 进行 一 次 产品 介绍 ,以便 参与 评审 的 人 员 
对 产品 有 一 个 大 致 了 解 。 作 者 应 当 允 许 评审 人 员 有 足够 的 时 间 来 评审 材料 。 测 试 人 
员 根 据 程序 的 逻辑 准备 走 查 时 必须 具有 代表 性 的 测试 用 例 。 
2) 走 查 产品 
评审 人 员 负 责 为 走 查 做 准备 ,并 且 如 果 必 须 的 话 , 需 要 完全 熟悉 走 查 标准 、 检 查 表 和 任何 
其 他 必须 的 用 于 走 查 的 信息 。 评 审 人 员 自 评审 工作 产品 ,并 且 必 须 准备 在 走 查 会 议 上 讨论 他 
们 对 产品 做 出 的 评注 建议. 问题 及 相关 的 红色 标记 部 分 。 
3) 走 查 会 议 
走 查 整个 产品 。 走 查 组 成 员 可 以 对 产品 提出 问题 ,并 且 / 或 者 记录 他 们 关心 的 事情 。 如 果 
指派 了 一 个 记录 员 ,记录 员 记 录 评注 和 决定 ,这 些 内 容 将 包含 到 走 查 报告 中 。 
在 走 查 结束 时 ,相关 负责 人 或 评审 人 员 可 以 建议 是 否 进 行 下 一 次 走 查 。 
4) 解决 问题 
作者 在 评审 人 员 的 协助 下 解决 走 查 中 发 现 的 问题 。 无 法 解决 的 问题 需要 提交 项 目 领 导 并 
寻求 解决 。 
5) 记录 走 查 
作者 至 少 需 要 记录 评审 人 员 的 名 字 ,被 评审 的 工作 产品 、 走 查 的 日 期 \ 缺 陷 、 和 遗漏、 矛盾 和 
改进 建议 列表 。 有 多 种 方法 来 记录 所 执行 的 走 查 过 程 ,例如 软件 工程 记事 本 或 者 软件 开发 文 
件 夹 等 。 
6) 返工 产品 
根据 走 查 中 的 记录 ,作者 返工 工作 产品 。 
代码 检查 应 在 编译 和 动态 测试 之 前 进行 ,在 检查 前 ,应 准备 好 需求 描述 文档 、 程 序 设计 文 
档 程序 的 源 代码 清单 .代码 编码 标准 和 代码 缺陷 检查 表 等 。 
在 实际 使 用 中 ,代码 检查 能 快速 找到 错误 或 缺陷 ,发 现 30% 一 70% 的 逻辑 设计 和 编码 缺 
陷 ,而 且 代 码 检查 看 到 的 是 问题 本 身 而 非 征兆 。 但 是 代码 检查 非常 耗费 时 间 ,而 且 代 码 检查 需 
要 知识 和 经 验 的 积累 。 
代码 检查 可 以 使 用 测试 软件 进行 自动 化 测试 ,以 利于 提高 测试 效率 ,降低 劳动 强度 ,或 者 
使 用 人 工 进行 测试 ,以 充分 发 挥 人 的 逻辑 思维 能 力 。 


2.3.2 代码 检查 内 容 


代码 检查 主要 涉及 以 下 内 容 : 
检查 变量 的 交叉 引用 表 。 重 点 是 检查 未 说 明 的 变量 和 违反 了 类 型 规定 的 变量 。 还 要 
对 照 源 程序 ,逐个 检查 变量 的 引用 、 变 量 的 使 用 序列 .临时 变量 在 某 条 路 径 上 的 重 写 情 
况 ,局 部 变量 .全 局 变量 与 特权 变量 的 使 用 。 
检查 标号 的 交叉 引用 表 。 验 证 所 有 标号 的 正确 性 ,检查 所 有 标号 的 命名 是 否 正确 , 转 
向 指定 位 置 的 标号 是 否 正确 。 
检查 子 程序 、 宏 、 函 数 。 验 证 每 次 调用 与 所 调用 位 置 是 否 正确 ,确认 每 次 所 调用 的 子 程 
序 、 宏 、 函 数 是 否 存在 ,检验 调用 序列 中 调用 方式 与 参数 顺序 .个 数 .类 型 上 的 一 致 性 。 
等 价 性 检查 。 检 查 全 部 等 价 变量 的 类 型 的 一 致 性 ,解释 所 包含 的 类 型 差异 。 
常量 检查 。 确 认 常 量 的 取 值 和 数 制 .数据 类 型 ,检查 常量 每 次 引用 及 它 的 取 值 、 数 制 和 
类 型 的 一 致 性 。 
标准 检查 。 用 标准 检查 工具 软件 或 手工 检查 程序 中 违反 标准 的 问题 。 
风格 检查 。 检 查 发 现 程序 在 设计 风格 方面 的 问题 。 
比较 控制 流 。 比 较 由 程序 员 设计 的 控制 流 图 和 由 实际 程序 生成 的 控制 流 图 ,寻找 和 解 
释 每 个 差异 ,修改 文档 并 修正 错误 。 
选择 .激活 路 径 。 在 程序 员 设 计 的 控制 流 图 上 选择 路 径 ,再 到 实际 的 控制 流 图 上 激活 
这 条 路 径 。 如 果 选 择 的 路 径 在 实际 控制 流 图 上 不 能 被 激活 , 则 源 程序 可 能 有 错 。 
对 照 程序 的 规格 说 明 ,详细 阅读 源 代 码 , 逐 字 逐 句 进行 分 析 和 思考 ,比较 实际 的 代码 和 
期 望 的 代码 ,从 它们 的 差异 中 发 现 程 序 的 问题 和 错误 。 
补充 文档 。 桌 面 检查 的 文档 是 一 种 过 渡 性 的 文档 ,不 是 公开 的 正式 文档 。 通 过 编写 文 
档 , 也 是 对 程序 的 一 种 下 意识 的 检查 和 测试 ,可 以 帮助 程序 员 发 现 和 抓 住 更 多 的 错误 。 
管理 部 门 也 可 以 通过 审查 桌面 检查 文档 ,了 解 模块 的 质量 、 完 全 性 、 测 试 方法 和 程序 员 
的 能 力 。 

可 以 根据 检查 内 容 编 制 编码 规则 、 规 范 和 错误 或 缺陷 检查 表 等 作为 代码 检查 的 依据 和 
基础 。 


2.3.3 编码 规范 


编码 规范 是 程序 编写 过 程 中 必须 遵循 的 规则 ,一 般 会 详细 规定 代码 的 语法 规则 .语法 格式 
等 ,下 面 以 Java 编码 规范 为 例 说 明 编 码 规范 。 

1. 总 体 规范 

【规范 1】 时 刻 考虑 到 每 一 个 类 都 会 由 其 他 人 在 其 他 时 间 使 用 、 维 护 增强。 

【规范 2】 永 远 不 要 暴露 实现 细节 。 

【规范 3】 尽量 使 类 不 易 被 修改 ,同时 尽量 使 类 容易 被 扩展 。 

【规范 4] 针对 抽象 编程 。 

【规范 5】 一 个 类 只 完成 一 件 事情 。 

【规范 6】 父 类 应 该 可 以 完全 蔡 代 子 类 。 

【规范 7] 优先 使 用 聚合 复 用 (而 非 继 承 复 用 )。 

【规范 8] 确保 类 与 类 之 间 的 认 知 程度 最 小 。 


【规范 1】 不 要 声明 访问 控制 级 别 为 public 的 类 成 员 变量 、 属 性 或 域 。 
说 明 : 
类 成 员 变 量 体 现 了 类 的 状态 ,public 成 员 变 量 会 使 得 类 的 使 用 者 不 受 限制 地 访问 或 改 
变 类 的 当前 状态 ,这 是 极为 危险 的 。 
。 不 受 限制 地 访问 类 成 员 会 导致 不 可 预期 的 错误 (已 经 失去 了 采取 限制 措施 的 能 力 )。 
public 成 员 变量 容易 导致 类 之 间 的 紧密 耦合 。 
。 如 果 有 必要 访问 类 的 成 员 变 量 , 应 该 为 该 变量 设置 访问 器 (accessor) 方 法 。 
。 如 果 需 要 ,可 以 声明 public 常量 。 
【规范 2】 尽量 降低 类 的 可 访问 性 。 
说 明 
。 可 以 有 效 地 解除 类 之 间 的 耦合 关系 ,使 得 这 些 类 可 以 独立 地 演化 。 
可 以 使 得 类 更 加 容易 理解 和 使 用 一 一 其 他 程序 员 会 更 直观 地 了 解 类 的 功能 和 使 用 方法 。 
特别 注意 一 些 从 基 类 继承 的 方法 的 可 访问 性 ,尤其 是 在 Java 中 ,所 有 类 都 缺 省 地 继承 
了 Object, 所 以 必须 注意 ,如 果 Object 提供 的 实现 不 能 满足 需要 或 者 破坏 了 我 们 的 意 
图 , 则 应 该 覆盖 由 Object 类 继承 的 方法 。 
【规范 3】 设 计 和 开发 最 小 功能 类 一 一 一 个 类 只 做 一 件 事情 。 
说 明 
。 一 个 实现 了 很 多 功能 的 类 是 难以 维护 的 。 
。 一 个 实现 了 很 多 功能 的 类 是 难以 阅读 和 理解 的 。 
【规范 4】 尽 量 创 建 非 可 变 类 (只 读 类 ) 。 
说 明 ， 
。 非 可 变 类 易于 使 用 。 
。 通常 非 可 变 类 是 线程 安全 的 。 
【规范 5】 通过 限制 类 的 构造 函数 的 可 访问 性 来 限制 类 的 使 用 范围 。 
说 明 : 
。 对 于 只 提供 了 静态 (static) 方 法 和 静态 final 域 的 类 ,构造 函数 是 没有 必要 的 ,所 以 应 该 
将 该 构造 函数 声明 为 private。 
。 如 果 一 个 类 可 以 通过 工厂 类 或 简单 工厂 方法 创建 , 则 需要 考虑 将 构造 函数 声明 为 
private( 简 单 工厂 方法 ) 或 friendly( 工 厂 类 )。 
。 对 于 Java 语言 ,如果 一 个 类 只 被 同一 个 包 (package) 的 类 实例 化 (注意 ,不 是 访问 ) , 那 
么 应 该 将 构造 函数 声明 为 friendly。 
【规范 6] 不 要 使 用 全 局 (global) 变 量 ( 对 于 C++ 等 非 纯 面向 对 象 的 语言 ) 。 
说 明 : 全 局 变量 是 难以 控制 的 、 非 线程 安全 的 ,不 知道 哪 一 个 函数 或 线程 在 何 时 修改 了 
它 科 。 
如 果 一 定 要 使 用 全 局 变量 ,那么 请 把 它们 封装 在 类 中 。 
【规范 7】 尽 量 使 用 构造 函数 初始 化 对 象 , 而 且 构 造 函 数 应 该 构造 完全 的 初始 化 对 象 。 
说 明 : 不 要 采用 类 似 initO 〇 ) 这 样 的 函数 代替 构造 函数 的 初始 化 作用 ,除非 你 有 特别 好 的 理 
由 。 与 构造 函数 不 同 ,初始 化 函数 不 具备 强制 性 。 类 的 使 用 者 完全 可 以 不 调用 这 个 函数 而 直 
接 使 用 没有 初始 化 的 对 象 。 


3. 多 态 (polymorphism) 和 继承 (inheritance) 的 使 用 规范 
【规范 1】 除 非 类 是 专门 为 继承 而 设计 并 且 有 很 好 的 文档 ,否则 禁止 继承 。 
说 明 : 
。 继承 复 用 是 一 种 强 耦 合 关 系 , 继 承 打破 了 封装 性 。 如 果 一 个 类 依赖 于 父 类 的 某 些 实 
现 , 如 果 父 类 发 生变 化 , 则 可 能 打破 该 类 的 意图 。 
如 果 超 类 添加 了 新 的 方法 , 则 可 能 与 子 类 的 现 有 方法 (对 于 超 类 的 扩展 ) 冲 突 。 
如 果 超 类 修改 了 某 些 方法 的 实现 , 则 很 可 能 改变 子 类 的 行为 ,而 这 种 改变 是 不 被 子 类 
所 希望 的 。 
专门 用 于 继承 的 类 必须 有 很 好 的 文档 说 明 : 
4 描述 每 一 个 方法 的 意图 。 
4 描述 改写 每 一 个 方法 所 带 来 的 影响 。 
超 类 中 的 构造 方法 绝对 不 要 调用 可 以 改写 的 方法 ,因为 超 类 的 构造 方法 在 子 类 的 构造 
方法 被 调用 之 前 执行 ,所 以 ,这 样 做 会 导致 子 类 方法 在 没有 初始 化 之 前 就 被 调用 。 
为 了 防止 类 被 错误 地 继承 ,可 以 将 类 声明 为 final。 

。 为 了 防止 方法 被 错误 地 改写 ,可 以 将 方法 声明 为 final。 

【规范 2】 对 于 不 是 为 继承 而 设计 的 类 ,必须 将 类 声明 为 final(Java)/const(C++)。 

说 明 : 参见 2. 3. 3 节 【 规 范 1]。 

【规范 3】 优先 使 用 聚合 (Composition) 复 用 ,而 非 继 承 复 用 。 

说 明 : 

聚合 : 如 果 类 A 含有 类 B 的 一 个 或 多 个 私有 域 ,那么 就 叫做 类 A 聚合 了 类 B。 

。 聚合 复 用 不 会 打破 封装 性 。 

。 使 用 聚合 复 用 来 扩展 一 个 超 类 不 会 导致 二 者 直接 的 紧密 耦合 。 

【规范 4] 接口 优 于 抽象 类 。 

说 明 : 

。 抽象 类 的 内 存 结构 远 比 接口 复杂 ,所 以 编译 器 实现 对 于 抽象 类 的 继承 的 时 候 , 其 处 理 

方式 也 复杂 得 多 。 

。 接口 使 得 类 的 实现 更 加 安全 。 

。 接口 可 以 更 好 地 隐藏 实现 细节 。 

【规范 5】 使 用 指向 基 类 ( 超 类 ) 的 引用 的 函数 ,必须 能 够 在 不 知道 具体 派生 类 ( 子 类 ) 对 象 
类 型 的 情况 下 使 用 它们 。 

【规范 6】 依 赖 于 接口 (或 抽象 类 ) 编 程 。 

说 明 : 由 于 基于 OOP 的 语言 支持 后 期 绑 定 ,因此 总 是 可 以 依赖 超 类 编程 ,并 且 不 用 担心 
找 不 到 真正 的 实现 类 。 

【规范 7】 分 离 表 示 逻 辑 和 实现 逻辑 。 

4. 重 载 规范 

【规范 1】 互 为 重 载 的 一 组 函数 提供 意义 相同 的 功能 。 

【规则 2] 互 为 重 载 的 一 对 函数 ,如 果 参 数 的 数目 相同 ,那么 至 少 有 一 对 形 参 ,其 类 型 是 “ 根 
本 不 同 的 ”。 

5. 代码 格式 规范 

【规范 1】 单行 代码 不 得 超过 80 字符 。 


【规范 2】 每 行 代码 最 多 包含 一 个 独立 的 语句 。 

【规范 3】 代码 缩 进 两 个 空格 。 

说 明 : 两 个 空格 已 经 足够 清晰 了 , 缩 进 量 过 大 会 导致 单行 代码 很 长 ,反而 影响 阅读 。 

【规范 4] 不 要 使 用 Tab 缩 进 代 蔡 空格 缩 进 。 

【规范 5】 如 果 单 行 代码 过 长 , 则 应 该 遵循 以 下 规则 断 行 : 

。 在 逗号 的 后 面 。 

。 在 操作 符 的 前 面 。 

。 断 行 的 起 始 位 置 应 该 对 应 其 原 行 表 达 式 的 起 始 位 置 ,如 果 无 法 满足 , 则 缩 进 两 个 空格 。 

【规范 6】 每 一 个 变量 的 声明 独占 一 行 。 

【规范 7】 将 变量 的 声明 阜 于 代码 块 的 开始 位 置 。 

【规范 8】 在 Java 中 for、while、do-while 循环 ,if、else if、else、switch-case 分 支 ,try-catch- 
finally 块 即使 仅 包含 一 个 语句 ,也 要 用 {} 包 含 。 其 他 语言 参照 执行 。 

【规范 9】 空 行 的 位 置 : 

。 在 逻辑 代码 段 之 间 。 

。 for、while .do-while 循环 ,if else if、else、switch-case 分 支 ,try-catch-finally 块 的 前 面 。 

。 在 两 个 类 或 接口 的 定义 之 间 。 

。 在 两 个 方法 /函数 /过 程 之 间 。 

。 方 法 /函数 /过 程 内 部 变量 定义 行 和 第 一 个 非 变 量 定 义 行 之 间 。 

【规范 10] 空格 的 位 置 : 

。 在 一 个 关键 字 和 左 括号 ”(" 之 间 。 注 意 : 不 要 在 方法 名 和 左 括号 之 间 加 空格 。 

。 在 参数 列表 的 每 个 逗号 ”," 之 后 。 
一 元 操作 符 前 后 。 注 意 : 二 元 操作 符 前 后 都 不 加 空格 。 例 如 : inta 二 10; a 三 a 十 1; 
a 十 十 ;。 
。 for 语句 的 每 个 表达 式 之 间 。 例 如 : for (int i 二 0; i 过 20; i 十 十 )*…。 
类 型 转换 语句 之 后 。 例 如 : String s 二 (String) c;。 

6. 代码 注释 规范 

【规范 1】 代码 注释 的 量 应 该 不 少 于 总 代码 行 数 的 1/3。 

说 明 : 只 有 足够 的 注释 才能 充分 地 说 明代 码 ,没有 哪个 规范 可 以 规定 注释 量 的 上 限 ， 
但 是 一 般 来 说 1/3 应 该 是 下 限 。 如 果 代 码 包括 注释 、 空 行 共 90 行 ,那么 注释 应 该 不 少 于 
30 行 。 

【规范 2】 在 维护 代码 的 同时 ,维护 注释 。 

说 明 : 通常 在 编写 代码 的 同时 都 会 对 代码 进行 注释 ,但 是 往往 在 维护 代码 的 时 候 忘 记 同 
时 维护 注释 。 所 以 很 多 注释 在 代码 反复 修改 之 后 失去 了 说 明代 码 的 作用 ,这 样 的 注释 还 不 如 
不 写 。 

【规范 3】 注释 不 要 重复 代码 。 

例如 : String str;// 声 明 一 个 String 对 象 str 

上 面 的 代码 看 上 去 没有 问题 ,但 是 注释 却 是 没有 用 的 ,只 是 对 代码 的 简单 重复 。 要 记 住 ， 
注释 是 用 来 说 明代 码 的 ,而 不 是 重复 代码 的 。 

【规范 4] 文件 注释 。 

文件 注释 用 于 说 明代 码 文件 的 一 些 附加 信息 , 它 位 于 源 代 码 文件 的 顶部 。 文 件 注释 最 重 


要 的 作用 是 记录 代码 维护 历史 。 
例如 : 


* 


文件 名 : Demo. java 

作者 : Sam Du 

完成 日 期 : 2010/02/02 

维护 人 员 : Sam Du 

维护 日 期 : 2010/02/02 

维护 原因 : 修改 了 对 于 图 的 深度 遍历 的 算法 
当前 版 本 : 2.0 

前 继 版 本 : 1.9beta 


当 和 


【规范 5】 为 每 一 个 类 编写 类 注释 。 
类 的 注释 位 于 类 声明 的 前 面 ,使 用 / * … * /进行 注释 (对 于 Java, 是 / xxx /)。 
类 的 注释 应 该 说 明 以 下 几 点 : 
。 完成 了 哪些 工作 , 即 这 个 类 是 做 什么 的 。 
使 用 的 方法 和 注意 事项 ,如 果 比 较 难以 表达 ,那么 可 以 写 一 些 示例 代码 。 
作者 列表 。 
当前 版 本 和 完成 时 间 。 

。 参考 类 , 即 这 个 类 与 哪些 类 相关 。 

类 注释 不 要 写 类 的 实现 方法 ,例如 “Matrix 类 采用 主 选 消 元 法 实现 矩阵 的 求 逆 运算 ,具体 
算法 是 ……” 这 样 的 注释 往往 会 限制 类 的 扩展 ,并 且 加 重 了 类 的 维护 的 工作 量 。 

下 面 来 看 一 个 好 的 类 注释 : 

/x 

* The <code> Long </code> class wraps a value of the primitive type 

<code> long</code> in an object. An object of type < code> Long </code> 
contains a single field whose type is < code> long </code>. 


以 上 是 类 的 作用 
<p> 


In addition, this class provides several methods for converting a 
<code> long</code> toa <code> String</code> anda 

<code> String</code> toa <code> long</code>, as well as other 
constants and methods useful when dealing with a < code> long </code>. 
以 上 是 类 的 使 用 简介 

@author Boynton Lee 

@author Arthur van Hoff 

作者 列表 

@version 1.64, 2010/02/02 

版 本 和 时 间 
/ 


这 这 和 


public final class Long extends Number implements Comparable { 

/ xx 代码 省 略 * / 

} 

【规范 6] 为 每 一 个 方法 (函数 、 过 程 ) 编 写 方法 注释 。 

方法 注释 位 于 方法 的 前 面 ,使 用 / * … * /进行 注释 (对 于 Java, 是 /xxx /)。 
方法 的 注释 应 该 说 明 以 下 几 点 : 


高 级 软件 测试 技术 


。 该 方法 的 作用 。 

。 使 用 的 注意 事项 (如 果 需 要 )。 

。 对 每 一 个 输入 参数 进行 说 明 : 作用 , 取 值 范围 等 。 

。 对 返回 值 进行 说 明 。 

。 对 每 一 个 抛 出 的 异常 进行 说 明 : 什么 情况 下 出 现 该 异常 。 
。 同样 的 ,方法 注释 也 不 要 写 算法 。 

例如 : 


/ xx 


/ xx 


[和 


% 


Executes the given SQL statement, which returns a single 
<code> ResultSet </code > object. 
以 上 是 该 方法 的 作用 
@param sql an SQL statement to be sent to the database, typicallya 
static SQL < code> SELECT </code > statement 
以 上 是 参数 说 明 
@@return a <code> ResultSet </code> object that contains the data produced 
by the given query; never < code> null </code> 
以 上 是 返 值 说 明 
@exception SQLException if a database access error occurs or the given 
SQL statement produces anything other than a single < code> ResultSet </code> object 
以 上 是 异常 说 明 


*/ 
ResultSet executeQuery(String sql) throws SQLException; 

【规范 7 为 每 一 个 属性 编写 属性 注释 。 

属性 是 类 的 状态 ,应 该 为 每 一 个 属性 编写 注释 : 说 明 该 属性 的 作用 ,如 果 需 要 ,说 明 其 取 
值 范围 ,以 及 使 用 的 注意 事项 。 

例如 : 


关 


The size of the ArrayList (the number of elements it contains) . 


*/ 

private int size; 

/xx The value is used for character storage. */ 
private char value[ ]; 


【规范 8] 不 要 编写 修饰 性 的 注释 。 
我 们 需要 的 是 有 用 的 代码 ,而 不 是 漂亮 的 代码 。 
例如 : 


/ 尖 尖 关 尖 关 尖 尖 关 关 美美 关 关 尖 尖 闫 闫 关 尖 尖 美美 闫 关 尖 闫 美美 尖 尖 闫 关 关 尖 尖 关 闫 闫 尖 尖 关 关 闪闪 尖 尖 关 关 关 关 关 关 关 关 尖 关 关 关 关 关 关 关 关 


%* 


The size of the ArrayList (the number of elements it contains). 


庆 祷 六 关 关 关 关 美和 和 关 关 关 关 尖 关 关 尖 尖 尖 关 关 关 关 关 关 关 尖 尖 尖 尖 关 关 关 关 关 关 关 关 关 关 关 关 关 / 


【规范 9】 为 每 一 个 局 部 变量 编写 行 末 注释 。 

行 末 注释 的 好 处 是 具有 明显 的 针对 性 。 

例如 : int length 二 0; //the length of the array,initial to zero. 
【规范 10】 在 具有 复杂 算法 的 代码 块 前 说 明 其 算法 。 

例如 : 


/x 
* 以 下 的 代码 采用 二 分 法 对 链表 进行 排序 ,具体 算法 是 …… 


*/ 

【规范 11】 为 每 一 个 for、while、do-while 循环 ,if、else if、else、switch-case 分 支 ,try-catch- 
finally 块 编写 注释 。 

这 样 的 地 方 通常 体现 了 代码 逻辑 。 对 于 复杂 的 代码 块 ,可 以 采用 / * … * /注释 ; 对 于 简 
单 的 代码 块 , 采 用 行 末 注释 。 

【规范 12】 对 于 临时 代码 ,编写 详细 的 注释 。 

临时 代码 就 是 目前 不 使 用 的 ,但 是 也 许 以 后 会 用 到 的 代码 。 对 于 这 样 的 代码 ,通常 使 用 
/*…* /把 它们 注释 起 来 。 

。 说明 注 释 的 原因 。 

。 说 明 注 释 者 和 注释 时 间 。 

。 说 明 在 什么 情况 下 可 以 恢复 代码 。 

。 说 明 在 什么 情况 下 这 些 代码 需要 彻底 删除 。 

。 代码 一 旦 正式 发 布 ,必须 彻底 删除 这 些 注释 。 

例如 : 

pa 

* 由 于 xx 原因 ,将 以 下 代码 注释 

* 注释 者 : Sam Du, 时 间 : 2010/03/04 

* 只 有 xoex 的 情况 下 才 可 继续 使 用 下 面 的 代码 

* 如 果 发 布 之 前 仍 未 使 用 , 则 删除 这 些 代 码 

村 ta 0; 

【规范 13】 尽 量 使 注释 简单 。 

例如 : 

// 采 用 Iterator 遍历 整个 缓冲 区 ,根据 对 象 最 后 一 次 使 用 的 时 间 删 除 过 期 的 对 象 

while(cache. Iterator( ). hasNext()); 

// 删 除 缓冲 区 中 过 期 的 对 象 

while(cache. Iterator( ). hasNext()); 

【规范 14] 在 编写 代码 之 前 编写 注释 。 

编写 注释 有 助 于 仔细 地 思考 代码 。 如 果 以 前 没有 这 个 习惯 ,请 尽量 养 成 它 , 会 体会 到 它 的 
好 处 。 

【规范 15】 对 于 Java, 按 照 JavaDoc 规范 编写 注释 。 

请 参考 2. 3. 3 节 的 规范 5、 规 范 6、 规 范 7, 这 三 个 规范 规定 的 注释 形成 了 JavaDoc。 

【规范 16】 对 于 文档 注释 ( 即 规范 5 ,规范 6 规范 7 规定 的 注释 ) ,应 该 只 说 明 “ 为 什么 这 样 
做 ”, 而 不 需要 说 明 “ 怎 样 做 ”。 

7. 命名 规范 

【规范 1】 必须 慎重 地 、 认 真 地 为 每 一 个 包 、 类 、 方 法 、 变 量 命 名 。 

说 明 : 要 起 一 个 科学 合理 的 名 字 , 因 为 名 字 是 理解 代码 的 重要 依据 。 同时, 一旦 代码 发 
布 , 其 依赖 者 、 继 承 者 都 要 永远 维持 这 种 命名 。 想 象 一 下 ,如 果 你 和 你 的 同事 不 得 不 使 用 类 似 
tj (统计 ? 条 件 ?) 这 样 的 名 字 ,而 又 不 能 改变 现状 (会 影响 其 他 使 用 者 ) , 那 该 是 一 件 多 么 痛苦 


的 事情 。 
【规范 2】 遵 循 技术 框架 的 命名 规范 。 
【规范 3】 必须 采用 英文 命名 。 
说 明 : 英文 是 全 世界 软件 业 通用 的 交流 语言 。 
【规范 4] 采用 有 意义 的 单词 ,要 求 见 文 知 意 。 
【规范 5】 可 以 采用 一 个 单词 或 多 个 单词 或 单词 的 缩写 作为 名 字 ,缩写 单词 的 每 个 字母 都 
要 大 写 。 
【规范 6】 对 于 难以 使 用 英文 的 情况 ,可 以 参考 相关 行业 标准 ,比如 使 用 国标 。 
【规范 7]】 不 要 使 用 冠 词 。 
例如 : anUser、thePassword、someEmps 没有 必要 使 用 冠 词 。 但 是 在 命名 的 时 候 , 要 注意 
名 词 复数 ,例如 users \actions 。 
【规范 8】 采 用 约定 俗 成 的 习惯 用 法 。 
例如 : getUsername 比 receiveUsername 好 ,虽然 它们 表达 的 意思 相同 。 
常见 的 习惯 用 法 : 
。 循环 变量 : i\j、k、m、n。 
临时 变量 : tmp temp。 
。 数据 库 : conn、stmt、pstmt、rs、rowSet。 
长 度 : length。 
。 数量 : count。 
。 位 置 : pos 或 position 。 
。 下 标 或 索引 : index。 
。 设置 /获取 : set/get。 
。 布尔 变量 的 命名 : isXXX, 例 如 isEmptySet。 
。 大 小 : size。 
。 工具 类 所 在 的 包 : util。 
【规范 9】 属性、 变量 、 方 法 参数 的 命名 规范 (Java 专用 ) : 
。 首 字母 小 写 ,其 他 单词 首 字母 大 写 。 例 如 userPrivilege。 
。 采用 名 词 。 例 如 connection( 而 不 是 Connect) 。 
。 关于 缩写 ,必须 符合 2. 3. 3 节 的 规范 3。 
【规范 10】 类 接口 命名 规范 : 
。 首 字母 大 写 ,其 他 单词 首 字母 大 写 。 例 如 BufferedStreamReader。 
。 采用 名 词 。 
， 关 于 缩写 ,必须 符合 2. 3. 3 节 的 规范 3。 
【规范 11] 包 的 命名 规范 : 
。 包 名 的 所 有 字母 都 要 小 写 。 
。 顶级 包 名 采用 开发 者 所 在 机 构 的 域名 的 逆序 。 例 如 com. sun. jdbc、org. jboss。 
。 非 项 级 包 名 采用 名 词 或 名 词 的 缩写 。 
【规范 12】 方法 (函数 ) 的 命名 规范 : 
。 首 字母 小 写 , 其 他 单词 首 字母 大 写 (Java 专用 )。 例 如 buildXML。 
。 采用 强 动词 。 例 如 createJSPPage。 


。 关于 缩写 ,必须 符合 2. 3. 3 节 的 规范 3。 

。 构造 方法 的 名 字 与 类 名 相同 的 语法 的 要 求 。 

【规范 13】 常量 的 命名 规范 : 

常量 的 每 一 个 字母 大 写 ,单词 之 间 用 下 划 线 分 隔 。 常 量 的 名 字 必 须 涵 盖 该 常量 的 准确 意义 。 
例如 : private static final int MAX_PATH = 255; 。 

【规范 14] 数组 的 命名 规范 : 

数组 应 该 总 是 用 下 面 的 方式 来 命名 : 


byte[ ] buffer; 
而 不 是 
byte buffer[ ]; 


【规范 15】 存 取 器 (accessor) 方 法 的 命名 规范 : 

。 存 取 器 方法 用 于 获取 类 的 一 个 属性 或 设置 类 的 一 个 属性 。 

。 存 取 器 后 的 单词 与 对 应 的 属性 名 称 相同 ,但 是 首 字母 大 写 ( 符 合 规范 10) 。 
。 存 取 器 方法 的 参数 与 对 应 的 属性 名 称 尽 量 相同 。 


2.3.4 代码 缺陷 检查 表 


在 进行 人 工 代 码 检查 时 ,代码 缺陷 检查 表 是 我 们 的 检查 依据 。 代 码 缺 陷 检 查 表 中 一 般 包 
括 容 易 出 错 的 地 方 和 在 以 往 的 工作 中 遇 到 的 典型 错误 或 缺陷 ( 见 表 2-1) ,下面 以 Java 为 例 说 
明 检 查 表 可 能 包括 的 内 容 。 


表 2-1 Java 缺 陷 检查 表 


重要 性 检 查 项 


重要 | 命名 规则 是 否 与 所 采用 的 规范 保持 一 致 

命名 一 般 | 是 否 遵循 了 最 小 长 度 最 多 信息 原则 

重要 | has/can/is 前 缀 的 函数 是 否 返 回 布尔 型 

重要 | 注释 是 否 较 清晰 且 必 要 

重要 | 复杂 的 分 支流 程 是 否 已 经 被 注释 

一 般 | 距离 较 远 的 右 大 括号 } 是 否 已 经 被 注释 

一 般 | 非 通用 变量 是 否 全 部 被 注释 

重要 | 函数 是 否 已 经 有 文档 注释 (功能 .输入 ,返回 及 其 他 可 选 ) 
一 般 | 特殊 用 法 是 否 被 注释 

一 般 | 每 行 是 否 只 声明 了 一 个 变量 (特别 是 那些 可 能 出 错 的 类 型 ) 
重要 | 变量 是 否 已 经 在 定义 的 同时 初始 化 

重要 | 类 属性 是 否 都 执行 了 初始 化 

一 般 | 代码 段落 是 否 被 合适 地 以 空 行 分 隔 

一 般 | 是 否 合理 地 使 用 了 空格 使 程序 更 清晰 

一 般 | 代码 行 长 度 是 否 在 要 求 之 内 

一 般 | 折 行 是 否 恰当 

一 般 | 包含 复合 语句 的 {} 是 否 成 对 出 现 并 符合 规范 

一 般 | 是 否 给 单个 的 循环 .条件 语 句 也 加 了 1{} 

一 般 | if/if-else/if-else if-else/do-while/switch-case 语句 的 格式 是 否 符合 规范 


注释 


声明 、 空 白 \ 缩 进 


续 表 


检 查 项 


声明 、 空 白 , 缩 进 


单个 变量 是 否 只 做 单个 用 途 


单行 是 否 只 有 单个 功能 (不 要 使 用 ;进行 多 行 合并 ) 


单个 函数 是 否 执行 了 单个 功能 并 与 其 命名 相符 


十 十 和 一 一 操作 符 的 应 用 是 否 符合 规范 


规模 


单个 函数 不 超过 规定 行 数 


缩 进 层 数 是 否 不 超过 规定 


可 靠 性 (总 则 /变量 
和 语句 ) 


是 否 已 经 消除 了 所 有 警告 


常数 变量 是 否 声明 为 final 


对 象 使 用 前 是 否 进行 了 检查 


局 部 对 象 变量 使 用 后 是 否 被 复位 为 NULL 


对 数组 的 访问 是 否 是 安全 的 (合法 的 index 取 值 为 [0, MAX_SIZE-1]) 


是 否 确认 没有 同名 变量 局 部 重复 定义 问题 


程序 中 是 否 只 使 用 了 简单 的 表达 式 


是 否 已 经 用 () 使 操作 符 优先 级 明确 化 


所 有 判断 是 否 都 使 用 了 (常量 一 一 变量 ) 的 形式 


是 否 消除 了 流程 悬挂 


是 否 每 个 if-else if-else 语句 都 有 最 后 一 个 else 以 确保 处 理 了 全 集 


是 否 每 个 switch-case 语句 都 有 最 后 一 个 default 以 确保 处 理 了 全 集 


for 循环 是 否 都 使 用 了 包含 下 限 不 包含 上 限 的 形式 (k= 二 0; k<MAX) 


XML 标记 书写 是 否 完整 ,字符 串 的 拼写 是 否 正确 


对 于 流 操 作 代码 的 异常 捕获 是 否 有 finally 操作 以 关闭 流 对 象 


退出 代码 段 时 是 否 对 临时 对 象 做 了 释放 处 理 


对 浮 点 数值 的 相等 判断 是 否 是 恰当 的 (严禁 使 用 = 一 直接 判断 ) 


可 靠 性 (函数 ) 


人 口 对 象 是 否 都 被 进行 了 判断 不 为 空 


入 口 数据 的 合法 范围 是 否 都 被 进行 了 判断 (尤其 是 数组 ) 


是 否 对 有 异常 抛 出 的 方法 都 执行 了 try…catch 保护 


是 否 函数 的 所 有 分 支 都 有 返回 值 


int 的 返回 值 是 否 合理 ( 负 值 为 失败 , 非 负 值 为 成 功 ) 


对 于 反复 进行 的 int 返回 值 判断 是 否定 义 了 函数 来 处 理 


关键 代码 是 否 做 了 捕获 异常 处 理 


是 否 确保 函数 返回 CORBA 对 象 的 任何 一 个 属性 都 不 能 为 null 


是 否 对 方法 返回 值 对 象 做 了 null 检查 ,该 返回 值 定 义 时 是 否 被 初始 化 


是 否 对 同步 对 象 的 遍历 访问 做 了 代码 同步 


是 否 确认 在 对 Map 对 象 使 用 迭代 遍历 过 程 中 没有 做 增 减 元 素 操作 


线程 处 理 函 数 循环 内 部 是 否 有 异常 捕获 处 理 ,以 防止 线程 抛 出 异常 而 退出 


原子 操作 代码 异常 中 断 ,使 用 的 相关 外 部 变量 是 否 恢复 先前 状态 


函数 对 错误 的 处 理 是 否 是 恰当 的 


可 维护 性 


实现 代码 中 是 否 消除 了 直接 常量 (用 于 计数 起 点 的 简单 常数 例外 ) 


是 否 消除 了 导致 结构 模糊 的 连续 赋值 (如 a 二 b 二 d 十 c )) 


是 否 每 个 return 前 都 要 有 日 志 记 录 


是 否 有 元 余 判 断 语句 (如 if (b) return true; else return false;) 


是 否 把 方法 中 的 重复 代码 抽象 成 私有 函数 


2.4 正规 技术 评审 


2.4.1 定义 


正规 技术 评审 (Formal Technical Review) 是 一 种 审查 技术 ,其 主要 特点 是 由 一 组 评审 者 
按照 规范 的 步骤 对 软件 需求 ,设计 代码 或 其 他 技术 文档 进行 仔细 的 检查 ,以 找 出 和 消除 其 中 
的 错误 或 缺陷 。 


2.4.2 技术 评审 的 目的 


正规 技术 评审 的 目的 包括 : 

。 发 现 软件 在 功能 、 逻 辑 、 实 现 上 的 错误 或 缺陷 。 

。 验证 软件 是 否 符合 它 的 需求 规格 。 

。 确认 软件 符合 预先 定义 的 开发 规范 和 标准 。 

。 保证 软件 在 统一 的 模式 下 进行 开发 。 

。 便于 项 目 管理 。 

此 外 ,技术 评审 为 新 手提 供 软 件 分 析 、 设 计 和 实现 的 培训 途径 ,后 备 、 后 续 开 发 人 员 也 可 以 
通过 技术 评审 熟悉 他 人 开发 的 软件 ,如 测试 人 员 可 以 通过 参与 评审 熟悉 被 审 的 工作 产品 ,为 测 
试用 例 的 分 析 和 设计 提供 支持 和 帮助 。 


2.4.3 评审 小 组 成 员 


评审 小 组 至 少 由 3 人 组 成 (包括 被 审 材料 作者 ) ,一 般 为 4 一 7 人 。 通 常 ,概要 性 的 设计 文 
档 需要 较 多 评审 人 员 ,涉及 详细 技术 的 评审 只 需要 较 少 的 评审 人 员 。 

评审 小 组 应 包括 下 列 角色 。 

1. 评审 员 (Reviewer Inspector) 

评审 小 组 中 的 每 一 个 成 员 ,无 论 他 (她 ) 是 主持 人 、 作 者 .宣读 员 、 记 录 员 ,都 是 评审 员 。 他 
们 的 职责 是 在 会 前 准备 阶段 和 会 上 检查 被 审查 材料 , 找 出 其 中 的 错误 或 缺陷 。 合 适 的 评审 员 
人 选 包括 被 审 材料 在 生命 周期 中 的 前 一 阶段 .本 阶段 和 下 一 阶段 的 相关 开发 人 员 。 例 如 ,需求 
分 析 规 约 的 评审 员 可 以 包括 客户 和 概要 设计 者 ,详细 设计 规约 和 代码 的 评审 员 可 以 包括 概要 
设计 者 、 相 关 模 块 开 发 人 员 、 测 试 人 员 。 

2. 主持 人 (Moderator) 

主持 人 的 主要 职责 包括 在 评审 会 前 负责 正规 技术 评审 计划 和 会 前 准备 的 检查 ; 在 评审 会 
中 负责 调动 每 一 个 评审 员 在 评审 会 上 的 工作 热情 ,把 握 评审 会 方向 ,保证 评审 会 的 工作 效率 
在 评审 会 后 负责 对 问题 分 类 及 问题 修改 后 的 复核 。 

3. 宣读 员 (Reader) 

宣读 员 的 任务 是 在 评审 会 上 通过 朗读 和 分 段 来 引导 评审 小 组 遍历 被 审 材料 。 除 了 代码 评 
审 可 以 选择 作者 作为 宣读 员外 ,其 他 评审 最 好 选择 直接 参与 后 续 开发 阶段 的 人 员 作为 宣读 员 。 

4. 记录 员 (Recorder) 

记录 员 负 责 将 评审 会 上 发 现 的 软件 问题 记录 在 “技术 评审 问题 记录 表 ”。 在 评审 会 上 提出 
的 但 尚未 解决 的 任何 问题 以 及 前 序 工作 产品 的 任何 错误 或 缺陷 都 应 加 以 记录 。 


5. 作者 (Author) 
被 审 材料 的 作者 负责 在 评审 会 上 回答 评审 员 提出 的 问题 ,以 避免 明显 的 误解 被 当 作 问题 。 
此 外 ,作者 必须 负责 修正 在 评审 会 上 发 现 的 问题 。 


2.4.4 技术 评审 活动 过 程 


1. 计划 

由 项 目 经 理 指定 的 主持 人 检查 作者 提交 的 被 审 材料 是 否 齐全 ,是 否 满足 评审 条 件 , 例 如 ， 
代码 应 通过 编译 后 才能 参加 评审 。 主 持 人 确定 评审 小 组 成 员 及 职责 ,确定 评审 会 时 间 、 地 点 。 
主持 人 向 评审 小 组 成 员 分 发 评审 材料 ,评审 材料 应 包括 被 审 材料 、 检 查 要 点 列表 (Checklist) 和 
相关 技术 文档 。 

2. 预备 会 

如 果 评 审 小 组 不 熟悉 被 审 材 料 和 有 关 背 景 ,主持 人 可 以 决定 是 否 召 开 预 备 会 。 在 预备 会 
上 ,作者 介绍 评审 理由 、 被 审 材料 的 功能 .用 途 及 开发 技术 。 

3. 会 前 准备 ( 自 评 审 ) 

在 评审 会 之 前 ,每 一 位 评审 员 应 根据 检查 要 点 逐 行 检查 被 审 材料 ,对 发 现 的 问题 做 好 标记 
或 记录 。 主 持 人 应 了 解 每 一 位 评审 员 会 前 准备 情况 ,掌握 在 会 前 准备 中 发 现 的 普遍 问题 和 需 
要 在 评审 会 上 加 以 重视 的 问题 。 会 前 准备 是 保证 评审 会 效率 的 关键 之 一 。 如 果 会 前 准备 不 充 
分 ,主持 人 应 重新 安排 评审 会 日 程 。 

4. 评审 会 

评审 会 由 主持 人 主持 ,由 全 体 评 审 员 共同 对 被 审 材料 进行 检查 。 宣 读 员 逐 行 朗读 或 逐 段 
讲解 被 审 材 料 ,评审 员 随 时 提出 在 朗读 或 讲解 过 程 中 发 现 的 问题 或 疑问 ,记录 员 将 问题 写 人 
“技术 评审 问题 记录 表 ”。 必 要 时 ,可 以 就 提出 的 问题 进行 简短 的 讨论 。 如 果 在 一 定时 间 内 (由 
主持 人 控制 ) 讨 论 无 法 取得 结果 ,主持 人 应 宣布 该 问题 为 “未 决 ” 问 题 ,由 记录 员 记 录 在 案 。 在 
评审 会 结束 时 ,由 全 体 评审 员 作出 最 后 的 评审 结论 。 主 持 人 在 评审 会 结束 后 对 “技术 评审 问题 
记录 表 ” 中 的 问题 进行 分 类 。 问 题 分 类 有 两 种 方式 : 一 种 是 按照 问题 的 种 类 分 , 另 一 种 是 按照 
问题 的 严重 性 分 。 

5. 修正 错误 

作者 在 会 后 对 评审 会 上 提出 的 问题 根据 评审 意见 进行 修正 。 

6. 复审 

如 果 被 审 材 料 存 在 较 多 的 问题 或 者 较 复杂 的 问题 ,主持 人 可 以 决定 由 全 体 评审 员 对 修正 
后 的 被 审 材料 再 次 举行 评审 会 。 

7. 复核 

主持 人 或 主持 人 委托 他 人 对 修正 后 的 被 审 材料 进行 复核 ,检查 评审 会 提出 的 并 需要 修正 
的 问题 是 否 得 到 解决 。 主 持 人 完成 “技术 评审 总 结 报告 ”。 


2.4.5 技术 评审 注意 事项 
(1) 评审 应 针对 被 审 材料 而 不 是 被 审 材料 的 作者 。 评 审 会 的 气氛 应 该 保存 轻松 、 愉 快 , 指 
出 问题 的 语气 应 该 温和 。 


(2) 每 次 评审 会 的 时 间 最 好 不 要 超过 2 小 时 ,具体 评审 时 间 的 确定 要 综合 考虑 被 审 材料 
的 难 易 程 度 、 组 织 内 评审 标准 规范 等 因素 。 当 被 审 材料 较 多 时 ,应 将 被 审 材料 分 为 车 干部 分 分 


别 进行 评审 。 
(3) 限制 争论 和 辩 驶 。 在 评审 会 上 ,对 于 一 时 无 法 取得 一 致意 见 的 问题 应 先 记录 在 案 , 另 
行 安排 时 间 进 行 深入 讨论 。 
(4) 阐明 问题 ,而 不 要 试图 解决 问题 。 不 要 在 评审 会 上 解决 发 现 的 问题 ,可 以 在 会 后 由 作 
者 自己 或 在 个 别人 的 帮助 下 解决 这 些 问题 。 


练习 


1 
2 
3 
4 


. 简 述 静态 测试 的 对 象 并 分 析 。 

. 简 述 走 查 (Walkthrough) 的 过 程 。 

. 从 软件 开发 过 程 的 角度 分 析 静 态 测试 的 作用 。 

. 按照 正规 技术 评审 的 规范 组 织 一 次 实际 的 正规 技术 评审 会 。 


动态 测试 技术 


3.1 黑 仿 测试 技术 


3.1.1 边界 值 分 析 法 


我 们 知道 ,函数 可 以 理解 为 从 一 个 集合 (函数 的 定义 域 ) 值 映射 到 另 
一 个 集合 (函数 的 值 域 ) ,定义 域 和 值 域 可 以 是 其 他 集合 的 又 积 。 任 何 程 
序 都 可 以 看 作 是 一 个 函数 ,程序 的 输入 构成 函数 的 定义 域 ,程序 的 输出 
构成 函数 的 值 域 。 定 义 域 测 试 是 著名 的 功能 性 测试 方法 之 一 。 这 种 形 
式 测试 的 重点 是 从 输入 变量 的 定义 域 来 进行 分 析 并 设计 出 测试 用 例 , 但 
实际 上 ,也 可 以 根据 被 测 程序 本 身 的 特点 基于 变量 的 值 域 来 分 析 并 设计 
测试 用 例 。 从 定义 域 或 值 域 来 分 析 并 设计 测试 用 例 往往 能 互相 补充 ,其 
基本 思想 均 源 于 函数 。 

1. 基本 边界 值 分 析 

为 了 便于 理解 . 先 讨 论 具 有 两 个 变量 zx: 和 zs 的 函数 下。 如 果 函 数 
下 对 应 一 个 程序 .那么 输入 的 两 个 变量 zx 和 zs 的 值 应 该 存在 取 值 的 边 
界 , 其 边界 值 要 根据 程序 的 需求 来 确定 ,变量 的 边界 值 可 能 是 显示 的 ,也 
可 能 是 隐 含 的 ,如 果 是 隐 含 的 , 则 需要 根据 实际 情况 进行 分 析 。 这 里 假 
设 变量 zx 和 zz 有 如 下 边界 ， 

a 委 z 委 0 
zd 

边界 值 分 析 关 注 的 是 输入 变量 的 边界 ,依据 边界 来 设计 测试 用 例 。 
边界 值 测试 的 基本 原理 是 程序 的 错误 或 缺陷 可 能 出 现在 输入 变量 的 极 
限 值 附近 。 例 如 ,程序 中 循环 语句 的 循环 次 数 可 能 会 多 一 次 或 少 一 次 ， 
就 涉及 边界 值 问题 ; 超市 销售 系统 中 的 食品 保质 日 期 是 一 个 边界 值 问 
题 ; 银行 系统 每 天 的 取款 限额 也 是 一 个 边界 值 问 题 。 在 我 们 的 生活 中 ， 
边界 值 问题 比比 皆 是 。 

基本 边界 值 分 析 的 基本 思想 是 在 输入 变量 的 取 值 区 间 内 取 最 小 值 、 
略 高 于 最 小 值 .正常 值 . 略 低 于 最 大 值 和 最 大 值 5 个 值 。 边 界 值 分 析 也 
是 基于 一 种 关键 假设 ,这 种 假设 称 * 单 缺陷 ?假设 , 即 由 于 缺陷 导致 的 程 


序 失效 极 少 是 由 两 个 (或 多 个 ) 缺 陷 的 同时 作用 引起 ,也 就 是 程序 的 失效 极 少 是 由 于 两 个 (或 多 
个 ) 变 量 在 其 边界 值 附 近 取 值 引起 的 ,而 是 单个 变量 在 其 边界 值 附近 取 值 引起 的 。 
基本 边界 值 分 析 的 测试 用 例 设计 规则 是 : 通过 使 所 有 变量 取 正 常 值 ,而 使 其 中 的 一 个 变 
量 取 最 小 值 Cmin) , 比 最 小 值 大 的 值 (min 十 ) ,位 于 或 接近 中 间 的 正常 值 (nom) , 比 最 大 值 小 的 
值 (max-) 和 最 大 值 (max) 这 5 个 值 ,每 个 变量 分 别 取 一 次 。 下 面 是 两 个 变量 的 基本 边界 值 分 
析 的 测试 用 例 的 输入 组 合 : 
Ui i i i i Cs i 
二 
ea i 
以 上 为 10 个 测试 用 例 的 输入 ,实际 上 只 要 考虑 9 个 就 可 以 了 ,因为 当 两 个 变量 都 取 位 于 
或 接近 中 间 的 正常 值 Cnom) 情 况 时 的 测试 用 例 有 两 个 ,这 两 个 测试 用 例 在 实际 的 测试 过 程 中 
的 效果 是 相同 的 ,一 般 不 会 有 新 发 现 。 就 程序 的 执行 路 径 而 言 , 这 两 个 测试 用 例 执行 的 路 径 相 
同 , 即 也 不 会 发 现 新 错误 或 缺陷 ,因此 可 以 省 略 其 中 之 一 。 
那么 对 于 nn 个 变量 的 被 测 程序 ,基本 边界 值 分 析 的 测试 用 例 数 为 : 对 于 及 n 变量 程序 ,每 
次 使 除 一 个 以 外 的 所 有 其 他 变量 取 正常 值 ,使 剩余 的 那个 变量 分 别 取 最 小 值 \ 略 高 于 最 小 值 、 
位 于 或 接近 中 间 的 正常 值 . 略 低 于 最 大 值 和 最 大 值 , 对 每 个 变量 都 重复 进行 一 次 。 这 样 , 对 于 
一 个 变量 函数 ,基本 边界 值 分 析 法 会 产生 4n 十 1 个 测试 用 例 。 
基本 边界 值 分 析 法 可 以 采用 两 个 步骤 : 分 析 变 量 数 和 变量 的 值 域 。 分 析 变 量 数 ,可 以 根 
据 所 测试 的 程序 本 身 进 行 分 析 , 例 如 ,在 机 票 定购 系统 中 查询 航班 功能 ,输入 的 变量 可 能 有 出 
发 地 、 目 的 地 、 出 发 时 间 、 人 数 、 时 间 段 共 5 个 变量 。 确 定 变量 的 值 域 取决 于 变量 本 身 的 性 质 ， 
例如 ,对 于 万 年 历 中 的 日 期 处 理 有 月 份 (m) 、 天 (d) 和 年 (y) 三 个 变量 ,对 于 变量 d 和 变量 mm, 无 
论 是 定义 成 枚 举 类 型 还 是 其 他 数值 类 型 均 能 很 容易 地 确定 其 值 域 ; 而 对 于 变量 y, 可 以 根据 
所 测试 程序 实际 情况 指定 一 个 “人 工 ” 值 域 。 值 域 确定 后 就 可 以 根据 变量 的 值 域 取 最 小 值 \ 略 
高 于 最 小 值 正常 值 、 略 低 于 最 大 值 和 最 大 值 了 。 对 于 人工” 指定 的 值 域 要 根据 具体 的 情况 去 
考虑 ,甚至 可 以 取 该 变量 类 型 允许 的 最 大 值 和 最 小 值 。 
边界 值 分 析 对 布尔 变量 没有 什么 意义 ,布尔 取 值 为 TRUE 和 FALSE, 其 余 三 个 值 不 明 
确 。 布 尔 变量 可 以 用 后 面 论述 的 决策 表 方 法 进行 测试 。 
逻辑 变量 也 可 以 用 “遍历 "边界 值 分 析 来 设计 测试 用 例 。 例 如 在 ATM 例子 中 ,银行 业务 
处 理 类 型 是 逻辑 变量 ,其 只 有 三 个 值 : 存款 ,取款 和 查询 。 密 码 也 是 一 个 逻辑 量 ,假设 进入 某 
系统 的 密码 为 4 位 ,那么 “遍历 ”所 有 可 能 的 组 合 则 很 困难 。 所 以 设计 测试 用 例 时 根据 情况 
决定 。 
基本 边界 值 分 析 具 有 局 限 性 。 如 果 被 测 程序 有 多 个 独立 的 变量 ,这 些 变量 也 是 物理 量 , 则 
很 适合 用 边界 值 分 析 。 这 里 的 关键 词 是 “独立 ”和 * 物 理 量 ”。 例 如 ,万 年 历 中 的 月 份 . 日 期 和 年 
三 变量 之 间 具 有 依赖 关系 ,虽然 三 个 变量 具有 物理 量 的 性 质 , 但 边界 值 分 析 没 有 考虑 到 变量 之 
间 的 依赖 ,这 样 用 边界 值 分 析 法 设计 的 测试 用 例 其 测试 效果 则 不 佳 。 物 理 量 准则 决定 了 物理 
量 的 实际 含义 ,对 用 例 的 设计 很 重要 。 例 如 ,变量 (物理 量 ) 表 示 温 度 、 压 力 、 空 气 速 度 、 迎 角 、 负 
载 等 , 则 对 于 边界 值 分 析 极 为 重要 。 如 监控 系统 监控 的 温度 范围 ; 医疗 分 析 系统 使 用 的 步 进 
电机 确定 要 分 析 的 样本 传送 带 的 位 置 等 都 是 物理 量 的 例子 。 物 理 量 便于 我 们 确定 变量 的 
值 域 。 


2. 健壮 性 边界 分 析 

健壮 性 边界 分 析 是 基本 边界 值 分 析 的 一 种 简单 扩展 。 除 了 变量 的 5 个 边界 值 分 析 取 值 以 
外 ,还 要 取 一 个 略 超过 最 大 值 (max 十 ) 的 值 ,以 及 取 一 个 略 小 于 最 小 值 (min 一 ) 的 值 ,以 测试 超 
过 边界 极 值 时 系统 会 有 什么 表现 。 

基本 边界 值 分 析 的 大 部 分 讨论 都 直接 适用 于 健壮 性 边界 分 析 。 健 壮 性 边界 分 析 最 有 意思 
的 部 分 不 是 输入 ,而 是 程序 的 预期 输出 。 当 物理 量 超过 其 最 大 值 或 小 于 其 最 小 值 时 程序 会 出 
现 什么 情况 呢 ? 如 果 变 量 是 代表 飞机 机 翼 的 迎 角 ,超出 值 域 范围 可 能 会 使 飞机 失速 ; 如 果 变 
量 是 代表 电梯 的 负荷 能 力 , 当 超 出 规定 的 重量 时 会 出 现 什么 情况 ? 健壮 性 边界 分 析 主 要 的 价 
值 是 观察 程序 的 例外 处 理 情况 。 

健壮 性 边界 分 析 的 测试 用 例 个 数 分 析 与 基本 边界 值 类 似 ,其 理论 测试 用 例 数 为 6n 十 1, 其 
中 为 变量 的 个 数 。 

3. 最 坏 情况 边界 分 析 

在 基本 边界 值 分 析 方 法 中 ,我 们 提 及 边界 值 测试 分 析 采 用 了 “ 单 缺 陷 "假设 。 除 了 这 种 “ 单 
缺陷 ”假设 之 外 ,还 有 所 谓 的 “多 缺陷 ”假设 的 情况 ,也 就 是 程序 的 失效 是 由 于 两 个 (或 多 个 ) 变 
量 值 在 其 边界 值 附 近 取 值 共同 引起 的 ,而 不 是 由 单个 变量 在 其 边界 值 附 近 取 值 引起 的 。 

当 我 们 关心 多 个 变量 取 极 值 时 程序 可 能 会 出 现 失效 的 情况 时 ,这 在 电子 电路 分 析 中 叫做 
“最 坏 情况 测试 ”, 在 这 里 也 使 用 这 种 思想 来 讨论 最 坏 情 况 的 边界 分 析 来 设计 测试 用 例 。 其 方 
法 是 : 对 每 个 变量 ,首先 取 包 含 最 小 值 . 略 高 于 最 小 值 . 正 常 值 . 略 低 于 最 大 值 和 最 大 值 5 个 值 
构成 一 个 集合 ,然后 对 这 些 集合 进行 笛 卡 儿 积 计算 ,生成 的 新 集合 中 的 每 个 元 素 均 是 一 个 测试 


用 例 的 输入 。 
对 于 两 个 变量 zx: 和 zs 的 情况 如 下 : 
A = {zimin Tlmint 9 Tlnom ?Tim 9 Timex} 
B = {Tomin Tomint »T2nom » T2max— » T2max} 
A XB = {(ximin Tomin) (Tlmin? T2mint 》 (Tlmin rT2nom )» 


Tlmin yzmax- ) » (Tlmin ? T2max ) » (Tlmint »T2min) » (Tlmint »T2mint >» 
(Timint »T2nom ) » (Tlmint 9 T2mex— ) » (Timint »T2max ) »*** } 。 

笛 卡 儿 积 生成 的 新 集合 共有 25 个 元 素 , 故 有 25 个 测试 用 例 集合 。 

集合 A 和 B 的 第 卡 儿 积 中 的 元 素 就 是 测试 用 例 的 输入 。 最 坏 情 况 测试 显然 更 彻底 ,因为 
基本 边界 值 分 析 的 测试 用 例 是 最 坏 情 况 边 界 值 分 析 测 试用 例 集合 的 真子 集 。 最 坏 情 况 测 试 还 
意味 着 花费 更 多 的 工作 量 , 即 n 变量 函数 的 最 坏 情 况 测试 ,会 产生 5" 个 测试 用 例 ,n 为 变量 的 
个 数 。 

从 以 上 的 分 析 中 ,看 出 诸如 测试 用 例 的 输入 组 合 二 zimn+ ,zomin+ 二 ,这 里 zx 和 zx; 分 别 取 
了 值 域 的 最 小 值 , 这 是 “多 缺陷 ?假设 的 体现 。 

最 坏 情 况 边 界 分 析 与 基本 边界 值 分 析 一 样 , 两 者 也 有 相同 的 局 限 性 ,特别 是 独立 性 要 求 方 
面 的 局 限 性 。 最 坏 情况 边界 分 析 的 最 佳 运 用 是 物理 变量 本 身 存在 大 量 交互 的 情况 ,或 者 在 程 
序 失效 的 代价 极 高 的 情况 下 采用 。 

除了 上 述 方法 之 外 ,还 有 一 种 更 为 极端 的 边界 值 分 析 方法 , 即 健壮 最 坏 情况 边界 值 分 析 。 
其 测试 用 例 的 设计 是 对 每 个 变量 分 别 取 比 最 小 值 小 .最 小 值 . 略 高 于 最 小 值 . 正 常 值 . 略 低 于 最 
大 值 . 最 大 值 . 比 最 大 值 大 共 7 个 值 构成 一 个 集合 ,然后 对 这 些 变量 的 取 值 集合 进行 笛 卡 儿 积 
计算 ,生成 的 新 集合 中 的 每 个 元 素 均 是 一 个 测试 用 例 的 输入 。 使 用 健壮 最 坏 情况 边界 分 析 的 


测试 用 例 个 数 为 7",n 为 变量 的 个 数 。 

4. 边界 值 分 析 设 计 测 试用 例 的 原则 

用 边界 值 分 析 设 计 测 试用 例 应 遵循 以 下 几 条 原则 : 

(1) 如 果 输 入 条 件 规定 了 值 的 范围 , 则 应 取 刚 达到 这 个 范围 的 边界 的 值 , 以 及 刚刚 超越 这 
个 范围 边界 的 值 作为 测试 输入 数据 。 

(2) 如 果 输 入 变量 规定 了 值 的 个 数 , 则 用 最 大 个 数 、 最 小 个 数 、 比 最 小 个 数 少 1、 比 最 大 个 
数 多 1 的 数 作为 测试 数据 。 

(3) 边界 值 分 析 同 样 适用 于 输出 变量 ,根据 规格 说 明 的 每 个 输出 条 件 ,使 用 前 面 的 原 
则 (1) 和 (2) 。 

(4) 如 果 程 序 的 规格 说 明 给 出 的 输入 域 或 输出 域 是 有 序 集合 , 则 应 选取 集合 的 第 一 个 元 
素 和 最 后 一 个 元 素来 设计 测试 用 例 。 

(5) 如 果 程 序 中 使 用 了 一 个 内 部 数据 结构 , 则 应 当选 择 这 个 内 部 数据 结构 边界 上 的 值 来 
设计 测试 用 例 。 

(6) 分 析 规 格 说 明 , 找 出 其 他 可 能 的 边界 条 件 。 

(7) 分 析 变 量 的 独立 性 ,以 确定 边界 值 分 析 法 的 合理 性 。 

(8) 在 取 中 间 值 或 正常 值 时 ,只 要 取 接 近 取 值 范围 中 间 的 值 就 可 以 了 。 

(9) 在 取 比 最 小 值 小 的 值 时 ,根据 情况 可 以 取 多 个 ,可 以 取 负 值 \0 和 小 数 。 

(10) 在 取 比 最 大 值 大 的 值 时 ,根据 情况 可 以 取 多 个 , 当 最 大 值 非 指定 时 ,根据 业务 具体 
分 析 。 


3.1.2 等 价 类 测试 法 


使 用 等 价 类 作为 功能 性 测试 的 基础 有 两 个 方面 考虑 : 希望 所 设计 的 测试 用 例 比较 完备 ， 
同时 又 避免 测试 用 例 的 完 余 。 边 界 值 测试 方法 不 能 很 好 地 解决 这 两 个 方面 的 问题 , 即 研究 使 
用 边界 值 分 析 法 设计 的 测试 用 例 ,很 容易 看 出 测试 用 例 存在 大 量 宛 余 ,再 进一步 仔细 研究 ,还 
会 发 现 测试 用 例 的 设计 存在 严重 漏洞 ,其 原因 主要 是 没有 考虑 到 同一 个 变量 的 多 区 间或 多 意 
性 ,也 没有 考虑 到 不 同 变 量 之 间 的 依赖 关系 。 等 价 类 测试 法 从 另外 一 种 角度 来 设计 测试 用 例 ， 
其 用 例 设计 也 使 用 了 * 单 缺陷 假设 "和 * 多 缺陷 假设 ”的 思想 。 

1. 等 价 类 的 基本 思想 

在 前 面 的 关系 概念 中 讨论 过 满足 等 价 关 系 的 元 素 构成 等 价 类 。 等 价 类 面临 的 问题 是 如 何 
对 变量 (输入 或 输出 变量 ) 划 分 等 价 类 ,同时 要 分 析 和 考虑 等 价 类 划分 的 粒度 问题 ,根据 变量 划 
分 成 的 等 价 类 构成 了 不 同 的 子 集 ,这 些 子 集 的 并 即 是 变量 的 整个 集合 或 全 集 。 这 对 于 测试 用 
例 的 设计 有 两 点 非常 重要 的 意义 : 子 集 并 成 整个 集合 或 全 集 提供 了 测试 用 例 设 计 的 完备 性 ; 
而 子 集 之 间 的 互 不 相交 可 保证 测试 用 例 设计 的 一 种 形式 上 的 无 元 余 。 由 于 子 集 是 由 等 价 关 系 
决定 的 ,因此 子 集 内 的 所 有 元 素 或 所 有 点 在 所 研究 的 业务 领域 内 具有 共同 的 性 质 。 等 价 类 测 
试 的 思想 是 通过 对 每 个 等 价 类 中 取 一 个 元 素 或 一 个 点 来 作为 测试 用 例 , 如 果 等 价 类 划分 合理 ， 
则 可 以 大 大 降低 测试 用 例 数 量 和 测试 用 例 之 间 的 完 余 。 例 如 ,根据 输入 的 三 条 边 判断 输出 的 
三 角形 类 型 的 例子 中 ,应 该 设计 一 个 测试 用 例 ,其 输出 结果 是 一 个 等 边 三 角形 的 情况 ,这 样 的 
测试 用 例 我 们 可 能 选择 一 个 三 元 组 (5.5,5. 5,5. 5) 作 为 测试 用 例 的 输入 ,也 可 以 选择 诸如 (6， 
6,6) 和 (100,100,100) 这 样 的 测试 用 例 输入 。 直 觉 告诉 我 们 ,程序 对 这 些 测 试用 例 的 执行 过 程 
和 第 一 个 测试 用 例 是 相同 的 ,因此 ,其 他 两 个 测试 用 例 是 元 余 的 。 再 如 ,对 于 具有 不 同 账户 类 


型 的 银行 系统 进行 测试 也 存在 类 似 的 等 价 类 问题 。 如 果 结 合 白 盒 测试 (结构 性 ) 来 理解 ,会 看 
到 具有 同样 账 务 类 型 的 测试 用 例 在 执行 时 程序 的 “处 理 ? 是 相同 的 ,映射 到 白 盒 测试 去 理解 就 
是 “遍历 相同 的 执行 路 径 ”。 

等 价 类 测试 的 关键 就 是 依据 等 价 关 系 划 分 等 价 类 。 我 们 用 一 个 简单 的 例子 说 明 等 价 类 的 
划分 问题 。 为 了 便于 理解 ,这 里 讨论 一 个 有 两 个 变量 x 和 xs 的 程序 P。 输 入 变量 x 和 xs 拥 
有 以 下 边界 以 及 边界 内 的 区 间 : 

a 三 x 三 e, 区 间 为 [a,6),[6,c),[c,d),[d,e] 六 和 

/zs<h, 区 间 为 [/,8),[g,h] | 


其 中 方 括号 和 圆 括号 分 别 表 示 闭 区 间 和 开 
区 间 的 端点 。zk 和 zs 的 无 效 区 间 是 za,zye， 
以 及 zsa《f ,zx2)h。 如 图 3-1 所 示 。 

2. 弱 一 般 等 价 类 测试 

上 面 的 例子 中 两 个 变量 zx 和 zs ,根据 其 范 1 
围 作 图 3-1 所 示 的 标识 分 析 , 从 图 中 可 以 看 出 标 ! 
识 为 1,2,3,4,5,6,7,8 的 范围 的 区 域 均 可 以 理解 9 
为 一 个 有 效 等 价 类 ,因为 在 这 些 不 同 的 区 间 内 其 图 3-1 弱 一 般 等 价 类 测试 用 例 分 布 
所 有 的 点 具有 同样 的 特性 , 即 符合 等 价 关系 的 定 
义 , 如 在 区 间 1 中 的 所 有 点 同时 符合 a 三 x1 二 5b,g 二 xs 二 hh。 

弱 等 价 类 测试 用 例 的 设计 基于 如 下 因素 考虑 : 

。 基于 单 缺 陷 假设 ; 

。 测试 用 例 的 个 数 是 变量 划分 区 间 最 多 的 那个 变量 的 有 效 区 间 个 数 ; 

。 测试 用 例 的 选取 应 该 考虑 分 布 的 均匀 。 

根据 以 上 分 析 , 对 于 有 两 个 变量 zx 和 zs 的 程序 P 的 弱 等 价 类 测试 用 例 的 个 数 为 4 个 , 测 
试用 例 分 布 可 以 是 图 3-1 中 标号 为 1,6,3,8 或 者 是 标号 为 5,2,7,4 的 区 域 (有 效 等 价 类 ) 的 任 
一 组 。 这 组 zx 和 zs 的 值 的 组 合 构成 弱 一 般 等 价 类 的 测试 用 例 的 输入 。 

3. 强 一 般 等 价 类 测试 

强 一 般 等 价 类 测试 与 弱 一 般 等 价 类 测试 的 不 同 主要 在 于 强 等 价 类 测试 是 基于 多 缺陷 假 
设 ,需要 从 不 同 的 输入 或 输出 变量 划分 的 有 效 等 价 类 中 或 区 间 中 取 一 个 值 分 别 构成 集合 ,这 些 
不 同 变量 取 值 构成 的 集合 的 笛 卡 儿 积 中 的 每 个 元 素 就 对 应 一 个 强 一 般 等 价 类 的 测试 用 例 的 输 
入 。 下 面 是 针对 图 3-1 进行 的 分 析 。 

变量 zx 和 zs 在 其 有 效 区 间 构 成 的 集合 是 : 


A = {zur Ti TH} 
B = {zz , X20} 
AXB = {(zus za), (zu Ta) (X12 9 Ta1) (TX12 9 T22 )» AT13 9 Ta1 )» (TX13 9 T22 )» (TH T21)» 


(Xu XT22 )}。 

在 A 和 B 的 第 卡 儿 积 (AX B) 中 的 每 个 元 素 均 对 应 图 3-1 中 的 一 个 有 效 等 价 类 区 域 , 所 
以 ,其 测试 用 例 应 该 覆盖 1,2,…,8 这 8 个 区 域 (等 价 类 ) ,在 每 个 区 域内 任 一 个 点 构成 一 个 测 
试用 例 的 输入 。 这 8 个 区 域 就 是 zx 和 zs 这 两 个 变量 的 划分 构成 的 有 效 等 价 类 。 

强 一 般 等 价 类 测试 具有 一 定 的 完备 性 : 一 是 保证 测试 用 例 覆 盖 所 有 的 有 效 等 价 类 ,二 是 
输入 或 输出 变量 每 个 有 效 区 间或 每 个 有 效 等 价 类 之 间 的 每 个 组 合 均 能 取 一 个 测试 用 例 。 


通过 例子 可 以 看 到 ,“ 好 的 ”等 价 类 测试 的 关键 是 等 价 关 系 划 分 的 选择 ,最 好 的 情况 是 每 个 
等 价 类 内 具有 被 “相同 处 理 ” 的 特性 或 等 价 类 内 的 点 在 我 们 研究 的 业务 领域 内 具有 同样 的 性 
质 。 特 别 强调 的 是 ,等 价 类 划分 既 可 以 基于 输入 变量 进行 ,也 可 以 基于 输出 变量 进行 。 

4. 弱 健 壮 等 价 类 测试 

弱 健 壮 等 价 类 测试 是 在 弱 一 般 等 价 类 测试 的 基础 上 考虑 了 无 效 等 价 类 的 情况 。 测 试用 例 
的 设计 思想 仍然 是 考虑 了 单 缺 陷 假 设 。 弱 健壮 等 价 类 测试 的 等 价 类 划分 原则 与 前 面 的 等 价 类 
方法 相同 。 其 测试 用 例 由 两 个 部 分 构成 : 

。 弱 一 般 等 价 类 部 分 的 测试 用 例 。 

。 额外 弱 健 壮 部 分 的 测试 用 例 。 对 于 nn 个 变量 而 言 , 在 这 个 变量 中 每 次 取 一 个 变量 ， 
分 别 取 这 个 变量 的 所 有 可 能 的 无 效 值 和 其 他 "一 1 个 变量 取 有 效 值 组 合 来 构成 测试 用 例 的 输 
入 ,保证 如 此 取 法 涉及 每 个 变量 , 即 每 个 变量 取 一 次 。 

对 于 上 面 的 例子 , 即 有 两 个 变量 zx 和 zz 的 mm 1 
程序 P, 如 图 3-2 所 示 , 其 变量 zx 和 zs 的 无 效 区 | | 
间 均 为 两 个 , 即 zi 二 ez<a 和 zs>>h ,xs 三 f。 ! 

图 3-2 中 弱 健 壮 等 价 类 测试 用 例 来 自 于 以 下 | 
区 域 ,包含 两 个 部 分 : 弱 一 般 的 部 分 , 即 在 1,6， | 
3,8 这 4 个 区 域内 或 在 5,2,7,4 这 4 个 区 域内 分 
别 取 一 个 测试 用 例 ,加 上 弱 健 壮 部 分 , 即 在 9， 
10,…,20 这 12 个 区 域内 取 一 个 测试 用 例 ,构成 
测试 用 例 集 的 测试 用 例 输入 或 输出 组 合 。 

健壮 等 价 类 测试 主要 测试 输入 或 输出 变量 图 3-2 弱 健 壮 等 价 类 测试 用 例 分 布 
无 效 或 例外 的 情况 ,在 实际 的 测试 中 ,需求 规约 
中 一 般 没 有 表达 对 无 效 或 例外 的 处 理 ,为 无 效 等 价 类 的 测试 用 例 设 计 带 来 不 便 , 但 测试 人 员 应 
该 积极 地 理解 需求 ,努力 划分 可 能 的 无 效 等 价 类 ,以 找 出 程序 对 无 效 或 例外 情况 处 理 的 正 
确 性 。 

5. 强健 壮 等 价 类 测试 

强健 壮 等 价 类 测试 是 在 强 一 般 等 价 类 测试 的 基础 上 考虑 无 效 等 价 类 的 情况 。 测 试用 例 的 
设计 思想 仍然 考虑 多 缺陷 假设 。 强 健壮 等 价 类 测试 的 等 价 类 划分 原则 与 前 面 的 等 价 类 方法 相 
同 ,其 测试 用 例 由 两 个 部 分 构成 ， 

。 强 一 般 等 价 类 部 分 的 测试 用 例 。 

。 额外 强健 壮 部 分 的 测试 用 例 。 是 在 “额外 弱 健 壮 部 分 的 测试 用 例 ” 的 基础 上 进一步 考 
虑 个 变量 中 两 个 或 两 个 以 上 变量 或 所 有 变量 都 无 效 的 情况 下 等 价 类 内 的 取 值 。 即 在 个 变 
量 划 分 的 等 价 类 中 (包含 有 效 等 价 类 和 无 效 等 价 类 ) 分 别 取 值 构成 测试 用 例 , 在 这 些 测 试用 例 
中 个 变量 的 取 值 可 以 有 一 个 变量 取 值 来 源 于 该 变量 的 无 效 等 价 类 ,也 可 能 存在 其 中 的 两 个 
或 多 个 或 n 个 变量 的 取 值 全 部 来 源 于 无 效 等 价 类 。 

实际 上 强健 壮 等 价 类 的 测试 用 例 输入 对 应 于 每 个 变量 区 间 取 值 (包括 有 效 区 间 和 无 效 区 
间 ) 构 成 集合 的 笛 卡 儿 积 , 笛 卡 儿 积 中 的 每 个 元 素 就 是 一 个 测试 用 例 的 输入 组 合 。 值 得 注意 的 
是 ,这 些 元 素 可 能 是 输入 变量 的 组 合 , 即 是 测试 用 例 的 输入 ; 也 可 能 是 输出 变量 的 组 合 , 即 是 
测试 用 例 的 输出 。 针 对 以 上 的 例子 ,图 3-3 中 标 有 数字 的 区 域 均 是 测试 用 例 的 取 值 区 域 ,其 中 
的 1,2,3,4,5,6,7,8 为 强 一 般 等 价 类 部 分 的 测试 用 例 取 值 区 域 ; 9,10,11,12,13,14,15,16， 


17,18,19,20,21,22,23,24 为 额外 强健 壮 部 分 的 测试 用 例 取 值 区 域 。 

6. 等 价 类 方法 设计 原则 受 ， 

等 价 类 是 指 某 个 输入 域 或 输出 域 的 子 集合 。 、 | 
在 该 子 集合 中 ,各 个 输入 数据 对 于 发 现 程序 中 的 ! 
错误 或 缺陷 都 是 等 效 的 。 因 此 ,可 以 把 全 部 输入 ! 
或 输出 数据 合理 地 划分 为 若干 等 价 类 ,在 每 一 个 ! 
等 价 类 中 取 一 个 数据 作为 测试 的 输入 条 件 或 输 
出 条 件 ,就 可 以 用 少量 代表 性 的 测试 数据 取得 较 
好 的 测试 结果 。 等 价 类 划分 有 两 种 不 同 的 情况 : 
有 效 等 价 类 和 无 效 等 价 类 。 有 效 等 价 类 是 指 对 
于 程序 的 规格 说 明 来 说 是 合理 的 .有 意义 的 输入 图 3-3 强健 壮 等 价 类 测试 用 例 分 布 
数据 或 输出 数据 构成 的 集合 ,利用 有 效 等 价 类 可 
检验 程序 是 否 实现 了 规格 说 明 中 所 规定 的 功能 和 性 能 。 无 效 等 价 类 与 有 效 等 价 类 的 定义 恰巧 
相反 。 设 计 测试 用 例 时 ,要 同时 考虑 这 两 种 等 价 类 。 因 为 软件 不 仅 要 能 接收 合理 的 数据 ,也 要 
能 经 受 意外 的 考验 ,这 样 的 测试 才能 确保 软件 具有 更 高 的 可 靠 性 。 

下 面 给 出 6 条 确定 等 价 类 方法 的 设计 原则 : 
在 输入 或 输出 条 件 规定 了 取 值 范围 或 取 值 个 数 的 情况 下 ,可 以 确立 一 个 有 效 等 价 类 和 
两 个 无 效 等 价 类 。 
在 输入 或 输出 条 件 规定 了 输入 或 输出 值 的 集合 或 者 规定 了 “必须 如 何 ” 的 条 件 的 情况 
下 ,可 以 确立 一 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 
在 输入 或 输出 条 件 是 一 个 布尔 量 的 情况 下 ,可 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 
价 类 。 
在 规定 了 输入 数据 的 一 组 值 (假定 个) ,并 且 程序 要 对 每 一 个 输入 值 分 别处 理 的 情况 
下 ,可 确立 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 
在 规定 了 输入 数据 必须 遵守 的 规则 的 情况 下 ,可 确立 一 个 有 效 等 价 类 (符合 规则 ) 和 车 
干 个 无 效 等 价 类 (从 不 同 角度 违反 规则 )。 
在 确 知已 划分 的 等 价 类 中 ,各 元 素 在 程序 中 的 处 理 方式 的 不 同 , 则 应 再 将 该 等 价 类 进 
一 步 地 划分 为 更 小 的 等 价 类 。 

。 一 个 输入 条 件 或 一 个 输出 条 件 均 可 能 划分 成 多 个 有 效 等 价 类 和 多 个 无 效 等 价 类 。 

7. 举例 

三 角形 问题 输入 三 角形 的 三 条 边 a、b、c, 程 序 的 输出 是 这 三 条 边 确定 的 三 角形 类 型 。 如 
果 a.b 和 < 满足 两 边 之 和 大 于 第 三 边 , 且 三 条 边 相 等 , 则 程序 的 输出 是 等 边 三 角形 。 如 果 a、b 
和 c 满足 两 边 之 和 大 于 第 三 边 , 且 恰好 有 两 条 边 相 等 , 则 程序 的 输出 是 等 腰 三 角形 。 如 果 a、b 
和 < 满足 两 边 之 和 大 于 第 三 边 , 且 没 有 两 条 边 相 等 , 则 程序 输出 的 是 不 等 边 三 角形 。 如 果 a、b 
和 “不 满足 两 边 之 和 大 于 第 三 边 , 则 程序 输出 的 是 非 三 角形 。 

(1) 等 价 类 设计 方法 一 : 根据 输入 变量 划分 等 价 类 。 

根据 输入 变量 划分 等 价 类 主要 是 等 价 类 划分 的 粒度 问题 ,划分 的 粒度 大 了 ,测试 用 例 的 设 
计 会 有 漏洞 ; 粒度 太 小 , 则 测试 用 例会 有 宛 余 。 

第 一 次 尝试 ,将 等 价 类 作 如 下 划分 : 

D1l={(a,b,c): a 一 b 一 c} 


区 
区 


D2={(a,b,c): 
D3={(a,b,c): 
D4={(a,b,c): 
D5={(a,b,c): 


a 一 b,a 天 c} 
a 一 cya 天 b} 
b=c,aAb} 
a 疾 b,a 关 c,b 关 c, 且 任意 两 边 之 和 大 于 第 三 边 } 


分 析 一 下 这 样 的 划分 ,可 以 看 出 等 价 类 D2,D3,D4 的 划分 粒度 过 大 ,这 些 等 价 类 可 能 包 
括 构成 三 角形 和 不 构成 三 角形 的 情况 ,设计 出 的 测试 用 例会 有 漏洞 。 所 以 必须 进行 第 二 次 划 
分 尝试 ,将 D2,D3 和 D4 分 别 划分 成 D21,D22、D31,D32 及 D41,D42。 具 体 划分 的 结果 如 下 : 
D1l={(a,b,c): a=b=c} 
D21={(a,b,c): 
D22={(a,b,c): 
D31={(a,b,c): 
D32={(a,b,c): 
D41={(a,b,c): 
D42={(a,b,c): 
D5 二 {(a,b,c): a 去 b,a 关 c,b 隆 c, 且 任意 两 边 之 和 大 于 第 三 边 } 
根据 以 上 划分 结果 ,可 以 得 出 表 3-1 所 示 的 测试 用 例 ,这 里 可 以 不 考虑 弱 和 强 的 情况 ,也 


a 一 b,a 天 c,a 十 b>c} 
a 一 b,a 天 c,a 十 b 委 c} 
a 一 cya 天 b,a 十 c>b} 
a 一 cya 天 b,a 十 c 之 b} 
b=c,aAb,b+c>a} 
b=c,ab,b+c<a} 


不 考虑 a,b 和 c 为 负数 和 0 的 情况 。 
表 3-1 依据 第 二 次 尝试 划分 的 测试 用 例 

编 号 输入 a 输入 b 输入 c 对 应 的 等 价 类 预期 输出 
T1(D1) 10.5 10.5 10.5 D1 等 边 三 角形 
T2(D21) 20.11 20.11 30 D21 等 腰 三 角形 
T2(D22) 20 10 8 D22 非 三 角形 
T4(D31) 2000 1500 1500 D31 等 腰 三 角形 
T5(D32) 33 80 33 D32 非 三 角形 
T6(D41) 60 35 35 D41 等 腰 三 角形 
T7(D42) 90 40 40 D42 非 三 角形 
T8(D5) 11 2 i D5 不 等 边 三 角形 


第 二 次 等 价 类 划分 尝试 后 应 该 是 基本 合理 的 。 但 是 还 可 以 进行 第 三 次 划分 尝试 ,即将 
D22,D32 和 D42 划分 成 : 


D221={(a,b, 
D222={(a,b, 
D321={(a,b, 
D322={(a,b, 
D421={(a,b, 
D422={(a,b, 


cys 
c): 
c): 
c): 
c): 


c): 


a 一 b,a 天 c,a 十 b 一 c} 
a 一 b,a 天 c,a 十 b 一 c } 
a 一 c,a 天 b,a 十 c<b} 
a=c,aAb,a+c=b } 
b=c,ab,b++c<a} 
b=c,ab,b 二 c=a} 


等 价 类 这 样 划 分 的 结果 更 加 合理 ,将 非 三 角形 情况 中 的 两 边 之 和 小 于 等 于 第 三 边 分 为 两 
边 之 和 小 于 第 三 边 和 等 于 第 三 边 两 种 情况 ,其 测试 用 例 的 个 数 达 到 了 11 个 ,具体 测试 用 例 这 


里 略 。 


另外 ,在 实际 测试 用 例 的 设计 时 应 该 考虑 a、b 和 的 值 为 无 效 情况 的 等 价 类 或 用 边界 值 
的 方法 设计 一 些 测 试用 例 做 补充 , 即 ab 和 < 的 值 为 负 值 和 0 的 情况 。 


(2) 等 价 类 设计 方法 二 : 根据 输出 变量 或 输出 的 结果 划分 等 价 类 。 

根据 三 角形 4 种 可 能 出 现 的 输出 : 非 三 角形 、 不 等 边 三 角形 、 等 腰 三 角形 和 等 边 三 角形 ， 
设计 如 下 的 输出 ( 值 域 ) 等 价 类 : 

Rl 二 {la,b,c): 有 三 条 边 ab 和 c 的 等 边 三 角形 } 

R2 二 {la,b,c): 有 三 条 边 a、b 和 c 的 等 腰 三 角形 } 

R3 二 {la,b,c): 有 三 条 边 ab 和 c 的 不 等 边 三 角形 } 

R4 二 {(a,b,c): 三 条 边 a、b 和 c 不 构成 三 角形 } 

按照 弱 一 般 等 价 类 测试 用 例 的 设计 思想 , 弱 一 般 等 价 类 共有 4 个 测试 用 例 ,与 强 一 般 等 价 
类 的 测试 用 例 个 数 相 同 。 如 表 3-2 所 示 。 


表 3-2 三 角形 程序 的 弱 一 般 和 强 一 般 测试 用 例 


用 例 编 号 a b c 预期 输出 
R1 6 6 6 等 边 三 角形 
R2 于 二 4.4 等 腰 三 角形 
R3 7 8 9 不 等 边 三 角形 
R4 11 5 5 非 三 角形 


虽然 等 价 类 的 划分 是 以 输出 结果 进行 的 ,但 是 在 考虑 等 价 类 的 健壮 情况 时 ,还 是 要 从 输入 
变量 和 人手。 这 里 为 了 便于 问题 的 讨论 ,假设 a、b、c 的 范围 如 下 : 0 二 a 二 800,0 二 b 二 800,0 二 
c 二 800。 那 么 根据 弱 健 壮 等 价 类 设计 思想 ,三 角形 问题 的 额外 弱 健 壮 等 价 类 测试 用 例 部 分 如 
表 3-3 所 示 ,当然 还 应 该 考虑 a、b 和 c 为 0 的 情况 。 


表 3-3 ”额外 弱 健 壮 测试 用 例 


用 例 编号 a b c 预期 输出 
Wl ed 22 25:5 a 取 值 不 在 范围 之 内 
W2 801 3.3 3.3 a 取 值 不 在 范围 之 内 
W3 0 5.4 8.0 a 不 能 为 0 
Wa 15 —2 9 b 取 值 不 在 范围 之 内 
W5 11 803 5 b 取 值 不 在 范围 之 内 
W6 15 0 10.3 b 不 能 为 0 
WwW? 10 5 一 未 < 取 值 不 在 
W8 19.3 790 880 c 取 值 不 在 
Wo9 25.1 29 0 c 不 能 为 0 


根据 额外 强健 壮 等 价 类 设计 思想 ,变量 a、b、c 中 可 能 有 一 个 无 效 ,也 可 能 有 两 个 无 效 ,也 
甚至 三 个 全 都 无 效 。 基 于 数学 的 组 合 知识 得 到 额外 的 强健 壮 等 价 类 测试 用 例 数 为 3c 十 cc 十 
Gc 二 26, 这 里 没 考虑 a、b 和 c 为 0 的 情况 。 表 3-4 是 部 分 额外 的 强健 壮 等 价 类 测试 用 例 。 


表 3-4 部 分 额外 的 强健 壮 等 价 类 测试 用 例 


用 例 编号 a b c 预期 输出 
SW1 二 22 25:5 a 取 值 不 能 为 负 
SW2 3.3 801 3.3 b 取 值 不 在 范围 之 内 
SW3 15 9 = c 取 值 不 能 为 负 
SW4 = 803 5 a 不 能 为 负 ,b 取 值 不 在 范围 之 内 


续 表 
用 例 编号 a b ec 预期 输出 
SW5 10 5 —7 b,c 不 能 为 负 
SW6 一 19.3 799 807 a 不 能 为 负 ,c 取 值 不 在 范围 之 内 
SW7 —13 一 多 了 一 0.01 asb,c 取 值 不 能 为 负 
SW8 809 一 3.33 一 4 a 取 值 不 在 范围 之 内 ,bc 不 能 为 负 


通过 上 面 例子 的 第 二 种 设计 方法 ,得 到 三 角形 程序 按照 输出 变量 划分 等 价 类 的 测试 用 例 
结果 : 

。 弱 一 般 等 价 类 测试 用 例 数 : 4。 

。 强 一 般 等 价 类 测试 用 例 数 : 4。 

。 弱 健 壮 等 价 类 测试 用 例 数 : 13。 

。 强健 壮 等 价 类 测试 用 例 数 : 30( 不 考虑 ab 和 c 为 0 的 情况 )。 如 果 考 虑 a、.b 和 c 为 0 
的 情况 ,测试 用 例 数 为 121(cic3 十 cicic3 十 cicic3c3 二 117 十 4)。 

值得 进一步 思考 的 是 ,对 于 所 测 程序 ,如 果 每 个 变量 (输入 或 输出 ) 均 能 划分 成 不 同 的 等 价 
类 ,其 弱 、 强 等 价 类 方法 设计 测试 用 例 的 思路 是 一 致 的 ,重要 的 是 要 灵活 掌握 。 例 如 ,万 年 历程 
序 中 的 变量 year、month 和 day 就 可 以 分 别 划 分 成 不 同 的 等 价 类 。 


3.1.3 错误 推测 法 


错误 推测 法 就 是 基于 经 验 和 直觉 推测 程序 中 所 有 可 能 存在 的 各 种 错误 或 缺陷 ,有 针对 性 
地 设计 测试 用 例 的 方法 。 

错误 推测 法 的 基本 思想 是 列举 出 程序 中 所 有 可 能 有 的 错误 或 缺陷 和 容易 发 生 错 误 或 缺陷 
的 特殊 情况 ,根据 这 些 推测 来 设计 测试 用 例 。 错 误 推测 法 本 身 不 是 一 种 测试 技术 ,而 是 一 种 可 
以 应 用 到 所 有 测试 技术 中 产生 更 加 有 效 测试 的 一 种 技能 ,例如 ,设计 一 些 非法 、 错 误 , 不 正确 和 
垃圾 数据 进行 输入 测试 是 很 有 意义 的 。 如 果 软 件 要求 输 入 数字 ,就 输入 字母 。 如 果 软 件 只 接 
受 正 数 ,就 输入 负数 。 如 果 软 件 对 时 间 敏 感 , 就 输入 异常 的 时 间 ,如 在 公元 3000 年 是 否 还 能 正 
常 工作 。 再 如 ,在 单元 测试 时 曾 发 现 并 列 出 的 许多 在 模块 中 经 常 出 现 的 错误 ,以 前 软件 测试 中 
曾经 发 现 的 错误 等 ,这 些 就 是 经 验 的 总 结 。 另 外 ,错误 推测 法 常常 会 考虑 输入 数据 和 输出 数据 
为 0 的 情况 ,或 者 输入 表格 为 空格 或 输入 表格 只 有 一 行 ,这 些 都 是 容易 发 生 错 误 的 情况 ,可 根 
据 这 些 情况 设计 测试 用 例 。 

总 之 ,用 好 错误 推测 法 应 该 具备 如 下 条 件 : 

。 充分 地 理解 业务 ; 

。 具有 开发 和 测试 的 实际 经 验 ; 

。 人 掌握 全 面 的 测试 技术 。 

下 面 是 三 个 具体 的 例子 。 

(1) 测试 两 位 加 法 计算 器 中 错误 推测 法 的 测试 用 例 举例 ,如 表 3-5 所 示 。 

(2) 对 一 个 排序 程序 ,根据 推测 可 以 列 出 可 能 存在 错误 或 缺陷 的 几 种 情况 : 

。 输入 表 为 空 。 

。 输入 表 中 只 有 一 行 。 

。 输入 表 中 所 有 的 行 都 具有 相同 的 值 。 

。 输入 表 已 经 是 排序 的 。 


表 3-5 两 位 加 法 计算 器 错误 推测 法 测试 用 例 


错误 推测 测试 用 例 测试 结果 
边界 数据 一 99 十 99 正常 计算 
规定 范围 内 数据 相 加 一 40 十 60 正常 计算 
没有 输入 数据 空 十 空 错误 提示 
输入 小 数 2.3 十 10 错误 提示 
非法 字符 A++b 错误 提示 


(3) 对 一 个 采用 两 分 法 的 检索 程序 ,根据 推测 可 以 列 出 可 能 存在 错误 或 缺陷 的 几 种 情况 : 
。 被 检索 的 表格 只 有 一 行 。 

。 表格 的 行 数 恰好 是 2 的 寡 次 (如 16) 。 

。 表格 的 行 数 比 2 的 寡 次 多 1 或 少 1( 如 15 .17) 。 

下 面 列 出 常用 的 基于 功能 的 错误 推测 法 部 分 测试 用 例 库 , 供 参 考 。 


功能 测试 用 例 库 


1. 输 入 验证 


数字 输入 验证 : 分 别 输入 数字 ( 正 数 、 负 数 、 零 值 , 单 精度 、 双 精度 ) ,字符 串 、 空 白 值 , 空 值 、 
临界 数值 。 不 合法 的 输入 ,系统 给 出 必要 的 判断 提示 信息 


字符 输入 验证 : 分 别 输入 单字 节 字 符 、 双 字 节 字符 、 大 小 写字 符 、 特 殊 字符 ,空白 值 , 空 值 。 
不 合法 的 输入 ,系统 给 出 必要 的 判断 提示 信息 


日 期 ,时间 输入 验证 : 分 别 输入 任意 字符 ,任意 数字 , 非 日 期 格式 的 数据 , 非 正确 日 期 (错误 
的 疼 年 日 期 )、 空 值 、 空 白 值 。 不 合法 的 输入 ,系统 给 出 必要 的 判断 提示 信息 。 注 : 有 些 系 
统 会 不 让 输入 当日 以 后 或 者 以 前 的 日 期 \ 时 间 ; 有 些 系统 会 通过 诸如 JavaScript 来 自动 填 
写 日 期 时 间 , 这 时 需要 注意 是 否 能 人 工 主观 填写 输入 


多 列表 选择 框 : 测试 是 否 能 多 选 ,列表 框 中 的 数据 是 否 能 显示 完全 。 当 列表 框 的 数据 过 多 
时 ,需要 对 数据 有 一 定格 式 的 排序 


单列 表 下 拉 框 : 测试 是 否 能 手工 输入 ,下 拉 框 中 的 数据 是 否 能 显示 完整 。 当 下 拉 框 的 数据 
很 多 时 ,需要 对 数据 有 一 定格 式 的 排序 。 如 果 下 拉 框 数据 值 过 多 时 ,下 拉 框 可 能 会 超出 IE 
显示 范围 ,此 种 情况 不 能 够 被 接收 


输入 验证 主 
要 包括 数字 


大 文本 输入 框 (textArea) : 虽然 它 能 够 满足 大 数据 量 的 输入 ,但 最 好 能 够 显示 地 标明 输入 字 
符 的 长 度 限制 ,并 且 应 该 结合 “字符 输入 验证 ”进行 。 需 要 注意 的 是 ,应 该 允许 标点 的 存在 


输入 验证 、 非 
法 字符 输入 
验证 ,输入 长 
度 验 证 、 必 填 
项 验证 与 信 


文件 输入 框 输入 验证 : 该 输入 框 主要 用 做 文件 上 传 操作 。 在 测试 过 程 中 ,应 该 注意 输入 文 
件 的 扩展 名 。 从 测试 角度 来 看 ,要 求 开 发 人 员 必 须 对 扩展 名 进行 输入 限制 ,并 且 在 适当 的 
地 方 输入 格式 提示 。 当 输入 是 空 值 等 不 合法 的 输入 时 ,系统 给 出 必要 的 判断 提示 信息 。 
另外 ,对 于 上 传 的 文件 大 小 应 该 做 限制 ,不 宜 太 大 


息 提 示 


输入 字符 长 度 验证 : 输入 字符 的 长 度 是 否 超过 实际 系统 接收 字符 长 度 的 能 力 。 当 输入 超 
出 长 度 时 ,系统 给 出 必要 的 判断 提示 信息 


必 填 项 验证 : 输入 不 允许 为 空 的 时 候 , 系 统 需要 有 提示 用 户 输入 信息 功能 


格式 ,规则 输入 验证 : 当 输入 需要 一 定 的 格式 时 ,系统 需要 有 提示 用 户 输入 信息 功能 。 比 
如 身份 证 号 码 可 以 输入 18 位 或 者 15 位 ,部 分 身份 证 最 后 一 位 为 字母 ,身份 证 上 生日 与 身 
份 证 号 码 有 一 定 规则 


系统 错误 定位 的 输入 验证 : 当 输 入 存在 问题 时 ,被 系统 捕获 到 ,此 时 页 面 上 的 光标 能 够 定 
位 到 发 生 错误 的 输入 框 


单 选 框 ,多 选 框 的 输入 验证 : 单 选 框 需要 依次 验证 单 选 框 的 值 是 否 都 有 效 ; 多 选 框 需要 依 
次 验证 多 选 框 的 值 是 否 都 有 效 


验证 码 验证 : 做 验证 码 输入 验证 时 , 先 结合 “字符 输入 验证 ”进行 测试 ,然后 注意 的 地 方 是 
当 利 用 下 回 退 或 者 刷新 时 ,显示 的 验证 码 应 该 和 实际 系统 验证 码 一 致 。 如 果 验 证 码 以 图 
片 形 式 显示 ,但 图 片 由 于 其 他 原因 (如 网 络 ) 不 能 看 到 或 者 显示 不 完整 ,系统 应 该 允许 进行 
重新 获取 ,最 好 不 要 做 整个 页 面 刷 新 


续 表 
2. 操作 验证 
页 面 链接 检查 : 每 一 个 链接 是 否 都 有 对 应 的 页 面 ,并 且 页 面 之 间 切 换 正 确 
相关 性 检查 : 删除 /增加 一 项 会 不 会 对 其 他 项 产生 影响 ,如 果 产 生 影 响 ,这 些 影响 是 否 都 
正确 
检查 按钮 的 功能 是 否 正确 : 如 增 、 删 . 改 、 查 等 功能 是 否 正 确 
重复 提交 表单 : 一 条 已 经 成 功 提交 的 记录 ,用 IE 回 退 后 再 提交 ,看 看 系统 是 否 做 了 处 理 
多 次 正 回 退 : 检查 多 次 使 用 IE 回 退 的 情况 ,在 有 回 退 的 地 方 回 退 , 回 到 原来 页 面 , 再 回 
该 用 例 库 主 | 退 ,重复 多 次 ,看 是 否 出 错 
要 针对 页 面 | 快捷 键 检查 : 是 否 支 持 常用 快捷 键 ,如 Ctrl 十 C、Ctrl 十 V、Backspace 等 。 对 一 些 不 允许 输 
操作 人 信息 的 字段 ,如 选 人 、 选 日 期 对 快捷 方式 是 否 也 做 了 限制 
回 车 键 检查 : 在 输入 结束 后 直接 按 回 车 键 , 看 系统 处 理 如 何 , 能 否 报 错 
上 传 下 载 文件 检查 : 上 传 下 载 文件 的 功能 是 否 实现 ,上 传 文件 是 否 能 打开 ,对 上 传 文件 的 
格式 有 何 规定 ,系统 是 否 有 解释 信息 ,并 检查 系统 是 否 能 做 到 
其 他 验证 : 在 页 面 上 图 片 的 大 小 不 宜 太 大 ,需要 第 三 方 软件 支持 时 ,应 该 给 出 必要 的 信息 ， 
比如 需要 jre 的 支持 ,但 用 户 计算 机 还 没有 安装 jre, 那 么 此 时 在 页 面 上 应 该 有 显著 的 标志 
来 提醒 用 户 进行 安装 
3. 登录 模块 测试 用 例 
访 记 山 这 主 娄 登录 名 输入 ， 证 和 有 入 有 。 需 要 注意 登录 名 是 否 区 分 大 小 写 和 空格 
针对 登录 模 密码 输入 : 进行 “输入 验证 
块 。 需 要 结合 提交 操作 : 结合 “访问 空 值 验证 ”。 当 输 入 正确 的 登录 名 和 密码 后 ,该 用 户 能 够 进入 到 指定 
< 访问 控制 验 的 正确 页 面 。 当 输入 的 登录 名 和 密码 有 误 时 ,系统 限制 其 登录 ,并 且 给 出 适当 的 提示 信 
证 "用 例 库 息 。 当 遇 到 错误 时 ,应 该 进行 “错误 页 面 测试 ” 
重 设 操作 : 当 进 行 重 设 操作 时 ,当前 页 面 上 所 有 输入 项 被 清空 
4. 增加 操作 测试 用 例 
添加 输入 内 容 ,进行 “输入 验证 ” 
应 该 限制 重复 增加 ,具体 操作 : 利用 网 络 传输 以 及 服务 器 的 延迟 ,多 次 单 击 “ 增 加 ”按钮 ,经 
常 在 数据 库 发 现 重复 提交 的 数据 
该 用 例 库 主 | 当 增 加 成 功 或 者 失败 后 ,应 该 有 必要 的 信息 提示 
要 针对 增加 | 文件 数据 的 增加 : 有 些 增加 包含 了 数据 库 数据 的 增加 和 一 些 文件 的 增加 ,此 时 的 数据 会 保 
操作 存在 两 个 地 方 ,所 以 测试 时 需要 对 相关 的 数据 做 全 面 的 验证 
文件 数据 验证 : 进行 “输入 验证 ?和 ”文件 输入 框 输入 验证 ”。 注 意 : 当 上 传 的 文件 为 中 文 
文件 名 时 ,上 传 到 服务 器 后 可 能 会 出 现 乱码 现象 。 现 在 一 般 的 做 法 是 将 原文 件 名 替换 成 
字母 和 数字 的 组 合 , 以 克服 汉字 文件 名 的 弊端 ,另外 可 以 增加 文件 的 安全 性 
5. 删除 操作 测试 用 例 
选择 需要 删除 的 数据 字段 。 有 时 候 系统 会 根据 ID 来 删除 ,有 时 候 系统 会 根据 名 称 来 删 
除 ,测试 的 时 候 应 该 多 注意 。 一 般 要 求 按照 ID 来 删除 ,因为 根据 名 称 来 删除 ,名 称 可 能 会 
存在 重 名 问题 
该 用 例 库 主 | 应 该 限制 重复 删除 。 具 体操 作 : 利用 网 络 传输 以 及 服务 器 的 延迟 ,多 次 单 击 “ 删 除 ” 按 钮 ， 
要 针对 删除 | 经 常 在 数据 库 中 发 现 重复 提交 的 数据 
操作 当 删 除 的 数据 还 有 文件 时 ,需要 去 验证 存在 数据 库 中 的 数据 ,以 及 硬盘 下 的 文件 是 否 都 被 


同时 删除 
当 数据 被 删除 成 功 或 者 失败 后 ,要 有 响应 的 信息 提示 
进行 “操作 验证 ” 


续 表 


6. 修改 操作 测 


试用 例 


打开 需要 修改 的 数据 页 面 ,注意 与 增加 页 面相 比 ,只 能 修改 部 分 数值 ,例如 关键 字 等 是 不 
能 被 修改 的 ,并 且 二 者 数据 应 该 是 一 致 的 

增加 页 面 上 的 输入 限制 与 修改 页 面 的 输入 限制 应 该 一 致 

修改 成 功 或 者 失败 后 ,应 该 有 相应 的 信息 提示 


试用 例 


条 件 输入 查询 ,先进 行 条 件 输入 框 的 “输入 验证 ” 

条 件 组 合 查 询 , 将 多 个 条 件 进行 组 合 查 询 , 结 果 可 以 通过 数据 库 验证 。 需 要 注意 的 是 , 整 
个 数据 查询 和 条 件 查询 数据 结果 条 数 要 一 致 。 另 外 ,如 果 遇 到 某 天 的 查询 时 间 段 ,有 的 数 
据 库 认为 一 天 不 包括 零点 零 分 ,有 的 数据 库 认 为 包括 

所 有 查询 结果 必须 进行 一 定 顺序 的 排列 ,可 以 按照 ID 或 名 称 来 排列 

当 查 询 成 功 或 者 失败 后 ,系统 应 给 出 必要 的 信息 提示 


试用 例 


当 数 据 量 很 大 的 时 候 , 需 要 进行 分 页 显示 ,每 页 显示 的 行 数 最 好 不 要 超过 20 行 ,每 页 列表 
上 最 好 有 序号 标识 , 行 与 行 之 间 颜 色 要 有 一 定 区 分 ,这 样 有 利于 用 户 的 查找 

翻 页 按钮 应 该 包括 首页 .前 一 页 ,后 一 页 、 尾 页 、 当 前 X 页 、 共 XX 页 ,这 些 常 用 按钮 都 能 正常 
显示 ,并 且 按 钮 都 能 正常 翻 页 

翻 页 按钮 的 每 页 显示 的 数据 要 准确 ,确保 没有 查 不 出 来 的 数据 ,最 好 的 做 法 就 是 和 数据 库 
结合 起 来 验证 

页 面 太 多 , 翻 页 数据 不 能 全 部 显示 时 ,系统 应 该 有 完善 的 应 对 机 制 ,比如 只 显示 当前 页 的 
前 三 页 和 该 页 的 后 三 页 的 页 数码 

当 翻 到 某 页 时 ,系统 应 该 有 明显 的 标识 , 标 出 该 页 面 所 处 的 页 码 


9 错误 页 面 测 


试 


错误 页 面 是 在 
遇 到 系统 异常 
的 情况 产生 的 
友好 界面 


3.1.4 


当 系统 遇 到 致命 错误 时 ,不 能 让 服务 器 的 调试 信息 出 现在 页 面 上 ,因为 这 样 做 会 带 来 不 安 
全 ,应 该 给 出 一 个 合适 的 提示 信息 


由 于 系统 繁忙 ,无 法 及 时 给 出 正确 信息 时 ,系统 可 以 给 出 友好 的 错误 页 面 ,如 “请 用 户 稍 后 
再 试 "等 提示 信息 


果 图 ; 


1. 因果 图 法 的 起 源 
在 前 面 阐述 的 边界 值 分 析 法 和 等 价 类 划分 法 中 ,我 们 着 重 考虑 输入 条 件 ,但 未 考虑 输入 条 


件 之 间 的 联系 


\ 相 互 组 合 等 。 但 是 ,如 考虑 输入 条 件 之 间 的 相互 组 合 ,会 由 于 组 合 情 况 数目 相 


当 大 ,需要 设计 大 量 的 测试 用 例 。 因 此 ,必须 考虑 描述 多 种 条 件 的 组 合 ,这 些 组 合 相应 地 会 产 
生 多 个 行动 ,可 以 考虑 根据 这 些 组 合 和 行动 来 设计 测试 用 例 ,这 就 需要 利用 因果 图 。 在 软件 工 
程 中 ,有 些 程序 的 功能 可 以 用 判定 表 的 形式 来 表示 ,并 根据 输入 条 件 的 组 合 情 况 规定 相应 的 操 
作 。 这 样 , 可 以 依据 判定 表 中 的 每 一 列 设计 一 个 测试 用 例 ,以 便 保 证 被 测试 程序 在 输入 条 件 的 
某 种 组 合 下 ,操作 是 正确 的 。 

2. 因果 图 法 的 特点 

。 考虑 输入 条 件 间 的 组 合 关系 ; 

。 考虑 输出 条 件 对 输入 条 件 的 信赖 关系 , 即 因果 关系 ; 

。 测试 用 例 发 现 错误 或 缺陷 的 效率 高 


。 能 检查 出 功能 说 明 书 (规约 ) 中 的 某 些 不 一 致 或 遗漏 ; 

。 因果 图 方法 最 终生 产 的 就 是 判定 表 , 它 适合 于 检查 程序 输入 条 件 和 各 种 组 合 情 况 。 

3. 因果 图 法 的 基本 步骤 

(1) 分 割 功 能 说 明 书 。 对 于 规模 比较 大 的 程序 来 说 ,由 于 输入 条 件 的 组 合 数 太 大 ,因此 很 
难 整体 上 使 用 一 个 因果 图 。 可 以 把 它 划 分 为 若干 部 分 ,然后 分 别 对 每 个 部 分 使 用 因果 图 。 例 
如 ,可 以 把 一 个 系统 的 功能 分 解 成 不 同 子 系统 的 功能 ,把 子 系统 的 功能 分 解 成 不 同 模块 的 功 
能 ,针对 每 个 模块 分 析 因 果 图 。 

(2) 识别 出 “原因 ”和 “结果 ”, 并 加 以 编号 。 所 谓 的 原因 ,是 指 输入 条 件 或 输入 条 件 的 等 从 
类 ; 而 结果 则 是 指 输出 条 件 或 输出 条 件 的 等 价 类 。 每 个 原因 或 结果 都 对 应 于 因果 图 中 的 一 个 
节点 。 当 原因 或 结果 成 立 ( 或 出 现 ) 时 ,相应 的 节点 取 值 为 1, 否则 为 0。 


(3) 根据 功能 说 明 书 中 规定 的 原因 和 结果 入 
之 间 的 关系 画 出 因果 图 的 基本 符号 。 如 图 3-4 (©) @ © UvV\ 四 


所 示 。 恒 等 非 
图 3-4 中 左边 的 节点 表示 原因 ,右边 的 节点 (a) @ 
表示 结果 。 恒 等 , 非 、 或 ,与 的 含义 为 : 六 
。 便 等 ; 车 a==1, 则 5=1; 车 a=0, 则 6 一 0) 四 是 二 由 
0。 即 车 原因 出 现 , 则 结果 出 现 ; 若 原因 @ @ 


不 出 现 , 则 结果 也 不 出 现 。 
非 (~): 车 a=1, 则 5=0; 车 a==0, 则 
5 三 1。 即 车 原因 出 现 , 则 结果 不 出 现 ; 若 
原因 不 出 现 , 则 结果 出 现 。 
或 (V); 着 a=1 或 6=1 或 c=1. 则 d=1; 若 a=b==c==0, 则 d= 二 0。 即 车 几 个 原因 中 
有 一 个 出 现 , 则 结果 出 现 ; 若 几 个 原因 都 不 出 现 , 则 结果 不 出 现 。 
与 (人 ): 车 a=4b==c==1, 则 d=1; 车 a==0 或 5=0 或 c=0, 则 d= 二 0。 即 车 几 个 原因 都 
出 现 , 结 果 才 出 现 ; 车 其 中 有 一 个 原因 不 出 现 , 则 结果 不 出 现 。 

画 因 果 图 时 ,原因 在 左 ,结果 在 右 , 由 上 而 下 排列 ,并 根据 功能 说 明 书 中 规定 的 原因 和 结果 
之 间 的 关系 ,用 上 述 基 本 符号 连接 起 来 。 在 因果 图 中 还 可 以 引入 一 些 中 间 节 点 。 

(4) 根据 功能 说 明 在 因果 图 中 加 上 约束 条 件 。 由 于 语法 或 环境 限制 ,有 些 原 因 与 原因 之 
间 、 原 因 与 结果 之 间 的 组 合 情 况 不 可 能 出 现 。 为 表明 这 些 特殊 情况 ,在 因果 图 上 用 一 些 记号 表 
明 约 柬 或 限制 条 件 。 因 果 图 的 约束 条 件 如 图 3-5 所 示 。 


AY A A 和 大 


图 3-4 因果 图 的 基本 符号 


‘ 7 了 A \ 
-0 on Ry 上 
“OO; ~O: Oh ~ ;OO 
(a) E( 互 斥 ) (b) [( 包 含 ) (c) O( 唯 一 ) (d) R( 要 求 ) (e) M( 屏 蔽 ) 


3-5 ”因果 图 的 约束 符号 


。E( 互 斥 ) : 表示 ab 两 个 原因 不 会 同时 成 立 ,两 个 中 最 多 有 一 个 可 能 成 立 。 即 表示 不 
同时 为 1, 即 ab 中 至 多 只 有 一 个 1。 


I( 包 含 ) : 表示 ac 这 三 个 原因 中 至 少 有 一 个 必须 成 立 。 即 表示 至 少 有 一 个 1, 即 a， 
b,c 中 不 同时 为 0。 

O( 唯 一 ) : 表示 a 和 2 当中 必须 有 一 个 , 且 仅 有 一 个 成 立 。 即 表示 a、b 中 有 且 仅 有 一 
不 1 

R( 要 求 ): 表示 当 a 出 现时 ,b 必须 也 出 现 。a 出 现时 不 可 能 5 不 出 现 。 即 表示 若 “一 
1, 则 2 必须 为 1。 即 不 可 能 o=1 且 5 二 0。 

M( 屏 蔽 ) : 表示 当 a 是 1 时 ,6b 必须 是 0。 而 当 a 为 0 时 ,6 的 值 不 定 。 即 表示 车 a 二 1， 
则 5 必须 为 0。 

(5) 根据 因果 图 夯 出 判定 表 。 夯 判定 表 的 方法 一 般 比较 简单 ,可 以 把 所 有 原因 作为 输入 
条 件 , 每 一 项 原因 (输入 条 件 ) 安 排 为 一 行 ,而 所 有 的 输入 条 件 的 组 合 一 一 列 出 ( 真 值 为 1, 假 值 
为 0) ,对 于 每 一 种 条 件 组 合 安排 为 一 列 ,并 把 各 个 条 件 的 取 值 情况 分 别 填 人 判定 表 中 对 应 的 
每 一 个 单元 格 中 。 例 如 ,如 果 因 果 图 中 的 原因 有 4 项 ,那么 判定 表 中 的 输入 条 件 则 共有 4 行 ， 
而 列 数 则 为 2: 二 16。 确 定好 输入 条 件 的 取 值 之 后 , 便 可 以 很 容易 地 根据 判定 表 推算 出 各 种 结 
果 的 组 合 , 即 输出 ,其 中 也 包括 中 间 节 点 的 状态 取 值 。 上 述 方法 考虑 了 所 有 条 件 的 所 有 组 合 情 
况 , 在 输入 条 件 比较 多 的 情况 下 ,可 能 会 产生 过 多 的 条 件 组 合 ,从 而 导致 判定 表 的 行 数 太 多 ,过 
于 复杂 。 然 而 在 实际 情况 中 ,由 于 这 些 条 件 之 间 可 能 会 存在 约束 条 件 , 因 此 很 多 条 件 的 组 合 是 
无 效 的 ,也 就 是 说 ,它们 在 判定 表 中 也 完全 是 多 余 的 。 因 此 根据 因果 图 画 出 判定 表 时 ,可 以 有 
意识 地 排除 掉 这 些 无 效 的 条 件 组 合 , 从 而 使 判定 表 的 列 数 大 幅度 减少 。 

(6) 为 判定 表 的 每 一 列 设计 一 个 测试 用 例 , 即 为 从 因果 图 中 导出 的 判定 表 中 的 每 一 列 
设计 一 个 测试 用 例 。 因 果 图 生成 的 测试 用 例 包括 了 所 有 输入 数据 取 True 与 取 False 的 情 
况 , 且 测试 用 例 数目 随 输 入 数据 数目 的 增加 而 增加 。 事 实 上 ,对 于 测试 较为 复杂 的 软件 , 因 
果 图 方法 常常 是 十 分 有 效 的 , 它 能 有 力 地 帮助 我 们 设计 有 效 的 测试 用 例 。 当 然 ,如 果 被 测 
软件 在 设计 阶段 就 采用 了 判定 表 , 也 就 不 必 再 画 因 果 图 了 ,而 是 可 以 直接 利用 判定 表 设计 
测试 用 例 。 

4. 因果 图 测试 实例 

某 公 司 产假 规定 如 下 : 

。 女 员工 产假 为 90 天 ,符合 晚婚 、 晚 育 ( 男 25 周岁 , 女 23 周岁 ) 的 ,可 增加 产假 30 天 , 共 

计 120 天 。 

。 难产 赁 医院 证 明 ,产假 增加 15 天 。 

。 怀孕 不 满 7 个 月 小 产 ,产假 不 超过 30 天 ,由 医生 检查 酌情 况 确定 。 

。 男 员工 符合 晚婚 .晚育 的 ,可 享受 陪 产假 7 天 。 

分 析 因 果 关 系 ,绘制 的 因果 图 如 图 3-6 所 示 。 

从 图 3-6 所 示 因 果 图 绘制 的 过 程 中 发 现 , 此 规定 有 些 条 目 未 对 以 明确 ,那么 有 些 情况 出 现 
时 ,就 找 不 到 相应 的 依据 了 。 比 如 ,第 二 胎 的 情况 如 何 处 理 ? 怀孕 不 满 7 个 月 小 产 时 ,如 果 医 
生 认 为 的 产假 天 数 超过 了 30 天 怎么 处 理 ? 等 等 。 发 现 需 求 .设计 的 不 完善 也 是 科学 运用 测试 
方法 理 清 思路 进行 测试 设计 一 个 有 益 的 方面 。 这 些 情况 如 果 是 在 软件 开发 过 程 中 ,无 论 是 开 
发 人 员 还 是 测试 人 员 都 应 当 找 到 制度 规定 者 .并 请 其 明确 ,否则 就 会 使 系统 的 容错 性 ,健壮 性 
降低 ,甚至 会 丢失 需求 。 此 例 因果 图 对 应 的 判定 表 如 表 3-6 所 示 ,判定 表 的 每 个 数据 列 对 应 一 
个 测试 用 例 。 


1. 医生 确定 产假 
数 不 超 过 30 天 
产假 天 数 为 医生 确 
定 的 产假 天 数 


[产假 天 数 为 医生 确 


2. 怀孕 不 满 7 个 月 小 产 SN 定 的 产假 天 数 
ee | 


6. 医院 证 明 难 产 


图 3-6 实例 因果 图 
表 3-6 实例 判定 表 

女 员工 ¥ i | 和 1 1 了 1 | | 豆 | 立 | 

晚婚 放生 | | | 各 Wr | | | 国医 到 区 ， 

晚育 六 各 匠 省 生硬 
条 件 | 怀孕 不 满 7 个 月 小 产 | | 0 to i i | i 0 

医院 证 明 难 产 a | 法 证 小 于 i | 

医生 确定 小 产后 的 产 

假 天 数 二 二 30 天 1 / | | 二 | / 区 

普通 产假 天 数 (90) 0 | 1 项 1 1 1 1|0|0|0|0 

小 六 产假 天 数 ( 医 生 殉 国医 光 区 于 区 .区区 到 医 到 区 到 蜂王 区 加 区 到 区 ,到 医 , 到 区， 

定 天 数 ) 
中 间 

难产 产假 天 数 (15) 0 1 1 1 0 0 0 0 0 0 0 0 
结果 

晚婚 晚育 产假 天 数 

攻克 区 一 医 到 区 司 贰 到 区 汪 攻 到 攻 到 区 汉 医 ,本 医 , 到 区， 

(30) 

陪 产假 天 数 (7) oo | 
结果 | 假期 90 | 135 | 105 | 105 | 105 | 120 | 99 | 9 | 9 | 7 | 0 | o | 0 


采用 因果 图 分 析 的 一 个 好 处 是 可 以 清晰 地 归纳 出 输入 条 件 之 间 的 限制 关系 ,直接 将 某 些 
条 件 的 组 合 忽略 掉 , 比 如 男 员 工 的 产假 .难产 ,小 产 情况 等 。 而 这 种 异常 情况 并 非 不 需要 测试 ， 
虽然 有 些 输 入 组 合 是 不 可 能 出 现 的 ,但 为 了 检验 软件 的 容错 性 ,还 应 针对 因果 图 中 的 各 个 约束 
条 件 ,灵活 采用 等 价 类 划分 法 和 边界 值 法 等 测试 方法 设计 测试 用 例 进 行 有 针对 性 的 测试 作为 
补充 。 


3.1.5 决策 表 测试 法 


在 所 有 功能 性 测试 方法 中 ,基于 决策 表 的 测试 方法 是 最 严格 的 ,因为 决策 表 具 有 逻辑 严格 
性 。 在 实际 的 测试 中 ,因果 图 法 和 决策 表 法 是 两 种 密切 关联 的 方法 ,与 其 他 的 黑 盒 测试 方法 相 
比 , 这 两 种 方法 的 测试 用 例 设 计 过 程 比较 麻烦 。 

自从 20 世纪 60 年 代 初 以 来 ,决策 表 一 直 被 用 来 表示 和 分 析 复 杂 人 逻辑 关系 。 决 策 表 很 适 
合 描 述 不 同 条 件 集 合 下 采取 行动 的 各 种 组 合 的 情况 。 图 3-7 所 示 为 决策 表 组 成 示意 图 。 决 策 
表 的 组 成 描述 如 下 : 
条 件 桩 (condition stub): 列 出 了 问题 的 所 有 条 件 。 


通常 认为 列 出 条 件 的 先后 次 序 无 关 紧要 。 


行动 桩 (action stub): 列 出 了 所 有 可 能 采取 的 操 


作 。 这 些 操 作 之 间 的 排列 先后 顺序 没有 约束 。 


条 件 条 目 (condition item): 列 出 针对 各 条 件 桩 的 
所 有 可 能 取 值 ,这 些 值 可 能 为 真 假 值 或 其 他 取 值 。 

行动 条 目 (action item): 列 出 在 条 件 条 目下 的 各 种 
取 值 情况 应 该 采取 的 动作 或 操作 。 
规则 : 任何 一 个 条 件 组 合 的 特定 取 值 及 其 相应 要 执 


行 的 操作 。 


规则 


条 件 桩 


行动 柱 


图 3-7 决策 表 组 成 示意 图 


在 决策 表 中 贯穿 条 件 条 目 和 行动 条 目的 一 列 就 是 一 条 规则 。 显 然 ,决策 表 中 列 出 多 少 组 
条 件 取 值 ,也 就 有 多 少 条 规则 ,条 件 条 目 和 行动 条 目 就 有 多 少 列 , 每 列 对 应 一 个 测试 用 例 。 
表 3-7 给 出 了 决策 表 的 一 个 例子 ,共有 6 个 测试 用 例 , 其 中 的 X 表示 行动 桩 对 应 的 操作 有 效 ， 
即 如 果 cl、c2 和 c3 都 为 真 , 则 采取 行动 al 和 a2。 如 果 cl 和 c2 都 为 真 ,而 c3 为 假 , 则 采取 行 
动 al 和 a3。 在 cl 为 真 ,c2 为 假 的 条 件 下 ,规则 中 的 c3 条 目 叫做 “不 关心 "条目 。 不 关心 条 目 
有 两 种 主要 解释 : 条 件 无 关 或 条 件 不 适用 或 此 条 件 不 需要 考虑 。 通 常用 “n/a” 来 表示 。 


表 3-7 决策 表 例 子 
桩 规则 1 规则 2 规则 3、4 规则 5 规则 6 规则 7、8 
cl T 下 至 F F F 
c2 T F T T F 
c3 党 F = 置 F 和 
al X X X 
a2 X X 
a3 X X 
a4 X X 


在 决策 表 中 ,如 果 所 有 条 件 都 是 二 叉 条 件 的 决策 表 , 即 每 个 条 件 只 能 取 两 个 值 :“ 真 "和 
“ 假 ”, 这 样 的 决策 表 叫 做 “有 限 条 目 决策 表 ”, 如 条 件 “ATM 机 中 现金 是 否 够 ?”, 只 能 取 “ 真 "和 
“ 假 ? 表 示 够 和 不 足 。 如 果 决 策 表 的 每 个 条 件 可 以 有 多 个 值 , 甚 至 每 个 取 值 对 应 于 变量 的 等 价 
类 , 则 对 应 的 决策 表 叫 做 “扩展 条 目 决策 表 ”, 如 条 件 “ATM 交易 类 型 ?”, 可 以 取 “ 存 款 ”、“ 查 
询 ”" 和 “取款 ”三 种 值 。 

在 使 用 决策 表 设 计 测 试用 例 时 ,把 条 件 解释 为 输入 ,把 行动 解释 为 输出 。 有 时 条 件 也 可 以 
为 输入 的 等 价 类 ,行动 是 被 测 软 件 的 主要 功能 处 理 部 分 。 这 时 规则 就 解释 为 测试 用 例 。 由 于 


决策 表 是 机 械 地 强制 为 完备 的 ,因此 决策 表 具 有 测试 用 例 的 完整 性 。 

下 面 用 三 角形 程序 的 例子 分 析 在 决策 表 的 条 件 条 目 中 出 现 “ 不 关心 "条目 和 “不 可 能 "条目 
的 情况 ,该 决策 表 是 有 限 条 目的 决策 表 。 

在 表 3-8 所 示 的 决策 表 中 给 出 了 “不 关心 条 目 ” 和 “不 可 能 条 目 ” 使 用 的 例子 。 本 例 中 有 4 
个 条 件 cl,c2,c3 和 c4 ,根据 数学 的 排列 组 合 原理 4 个 条 件 中 的 每 个 条 件 均 可 以 取 “ 真 ?和 *“ 假 ” 
两 个 值 ,一 共有 2 种 组 合 。 而 当 cl 条 件 为 “ 假 " 时 (这 里 “ 真 ” 用 Y 表示 ,“ 假 ”用 N 表示 ) ,c2,c3 
和 c4 均 为 不 关心 条 目 ,因为 条 件 cl 为 “ 假 ”, 其 取 值 为 “不 能 构成 三 角形 ”, 再 考虑 c2,c3 和 c4 
取 什 么 值 就 没有 实际 意义 了 ,所 以 这 时 候 c2,c3 和 c4 均 是 不 关心 条 目 , 用 “一 ”来 表示 。 在 表 
3-8 中 条 件 条 目 为 “Y,Y,Y,N”,“Y,Y,N,Y” 和 “Y,N,Y,Y” 时 均 是 “不 可 能 ”条 目 ,因为 这 些 
条 件 组 合 和 三 角形 的 实际 业务 逻辑 结合 理解 是 不 可 能 存在 的 。 之 所 以 有 这 些 * 不 可 能 ”组 合 的 
存在 是 因为 这 些 组 合 是 根据 数学 排列 组 合 的 原理 得 到 的 ,这 些 包 含有 不 关心 条 目 和 不 可 能 的 
规则 也 可 能 对 应 测试 用 例 ,以 测试 例外 的 情况 。 

表 3-8 三 角形 问题 决策 表 

cl: a\b.c 构 成 三 角形 ? N 


c2: a=b? = 


c3:，a 一 c? se 
c4: b=c? = 
al: 非 三 角形 XxX 
a2: 不 等 边 三 角形 
a3: 等 腰 三 角形 X X xX 
a4: 等 边 三 角形 X 
: 不 可 能 X X X 


xx<i<x 
zi<i<i~ 
xlzi<ix 
zlzixix 
xi<izix 
zi<izix 
“xlzizix 
zlzlzix 


be 


wo 


en 


a 


在 决策 表 的 设计 中 ,由 于 条 件 的 选取 不 同 得 到 的 决策 表 也 不 同 ,当然 ,根据 决策 表 设 计 的 
测试 用 例 也 不 同 。 所 以 在 设计 决策 表 时 ,条 件 的 选取 至 关 重 要 。 表 3-9 所 示 的 决策 表 给 出 了 
关于 三 角形 问题 决策 表 的 条 件 的 另 一 种 考虑 ,读者 可 以 进一步 分 析 表 3-9 中 的 “不 可 能 "条目 
和 “不 关心 条 目 ”。 另 外 ,决策 表 的 条 件 越 多 ,将 会 大 大 地 扩展 决策 表 的 规模 。 这 里 将 条 件 (cl: 
a.b、c 构成 三 角形 ?) 扩 展 为 三 角形 特性 的 三 个 不 等 式 的 详细 表示 。 如 果 有 一 个 不 等 式 不 成 
立 , 则 三 个 整数 就 不 能 构成 三 角形 。 还 可 以 进一步 扩展 ,因为 不 等 式 不 成 立 有 两 种 方式 : 一 条 
边 等 于 另外 两 条 边 之 和 ,或 严格 大 于 另外 两 条 边 之 和 。 


表 3-9 不 同 条 件 的 三 角形 问题 决策 表 


cl: a<b 十 c? F 于 T 宙 T 于 人 T TT T TT 人 
c2: b<atc? F T 加 T T 人 T T 下 至 至 
c3: c<<a 十 b? 人 i F TT 于 于 灾 二 到 党 下 
c4: a=b? 和 四 = 到 过 二 下 F F F F 
c5: a 一 c? = 一 一 于 里 F F PT 下 F F 
c6: b=c? 一 二 F 党 F 懈 F 重 F 
al: 非 三 角形 Xx 区 六 

a2: 不 等 边 三 角形 1 
a3: 等 腰 三 角形 XxX X X 

a4: 等 边 三 角形 X 

a5: 不 可 能 六 区 下 


另外 ,在 设计 决策 表 时 应 该 考虑 规则 之 间 可 能 出 现 的 元 余 及 不 一 致 的 情况 。 在 表 3-10 
中 ,规则 9 的 行动 条 目 与 规则 1 一 4 的 行动 条 目 相 同 , 这 种 情况 只 要 元 余 规则 中 的 行动 与 决策 
表 相 应 的 部 分 相同 ,决策 表 的 设计 就 不 会 有 大 问题 。 如 果 条 件 条 目 相同 而 行动 条 目 不 同 ,例如 
表 3-11 所 示 的 情况 , 则 决策 表 的 设计 会 有 问题 ,也 就 是 说 决策 表 的 设计 存在 错误 。 
表 3-10 一 个 元 余 的 决策 表 


条 件 1~4 5 6 8 9 
cl 下 F F F F T 
c2 一 二 于 F F F 
c3 一 加 F 下 F F 
al E 下 Xx 一 一 或 
a2 一 X X X 一 一 
a3 Xx 一 Xx 下 X 下 

表 3-11 一 个 不 一 致 的 决策 表 

条 件 1~4 5 6 昌 8 9 
cl F F F F 于 
c2 一 下 T F F F 
c3 一 下 F T F F 
al 实 XxX xX 一 二 一 
a2 一 或 x Xx 一 天 
a3 x 一 其 Xx Xx = 


如 果 表 3-11 所 示 的 决策 表 是 和 具体 的 业务 逻辑 相对 应 ,其 中 cl 是 真 ,c2 和 c3 都 是 假 , 那 
么 规则 1 一 4 和 规则 9 都 适用 , 即 规则 1 一 4 隐 含 包含 规则 9。 这 样 可 以 观察 到 以 下 情况 : 

。， 规 则 1 一 4 和 规则 9 是 不 一 致 的 。 

。 决策 表 是 非 确定 的 。 

规则 1 一 4 和 规则 9 是 不 一 致 的 ,是 因为 行动 的 组 合 不 同 ,所 以 整个 决策 表 是 不 确定 的 。 
测试 人 员 的 基本 原则 是 在 决策 表 中 小 心 使 用 不 关心 条 目 。 

针对 三 角形 例子 : 使 用 表 3-9 给 出 的 决策 表 , 可 得 到 11 个 功能 性 测试 用 例 : 3 个 不 可 能 
测试 用 例 ; 3 个 测试 用 例 违反 三 角形 性 质 ; 1 个 测试 用 例 可 得 到 等 边 三 角形 ; 1 个 测试 用 例 可 
得 到 不 等 边 三 角形 ; 3 个 测试 用 例 可 得 到 等 腰 三 角形 (如 表 3-12 所 示 )。 如 果 将 表 3-9 中 的 条 
件 “ 两 边 之 和 是 否 大 于 第 三 边 ” 扩 展 为 “一 条 边 等 于 另外 两 条 边 之 和 ”和 “一 条 边 严 格 大 于 另外 
两 条 边 之 和 ”, 则 决策 表 所 对 应 的 测试 用 例会 增加 ,如 会 增加 满足 “一 条 边 正好 等 于 另外 两 条 边 
的 和 ”情况 的 测试 用 例 。 

表 3-12 根据 表 3-9 得 到 的 测试 用 例 


测试 用 例 ID a b e 预期 输出 
TTC001 4 1 2 非 三 角形 
TTC002 1 4 区 非 三 角形 
TTC003 1 2 4 非 三 角形 
TTC004 5 5 等 边 三 角形 
TTC005 7 不 可 能 


续 表 

测试 用 例 ID a b 到 预期 输出 

TTC006 党 ? ? 不 可 能 

TTC007 区 和 等 腰 三 角形 

TTC008 ? ? ? 不 可 能 

TTC009 2 3 2 等 腰 三 角形 

TTC010 3 2 2 等 腰 三 角形 

TTCO11 3 4 5 不 等 边 三 角形 


以 上 主要 讨论 涉及 有 限 条 目的 决策 表 。 对 于 扩展 条 目 决策 表 的 测试 用 例 设计 ,重要 的 是 
要 分 析 条 件 的 划分 和 每 个 条 件 的 取 值 , 因 为 扩展 条 目的 决策 表 的 条 件 可 以 取 多 个 值 。 下 面 以 
一 个 具体 的 例子 来 讨论 扩展 条 目 决策 表 的 测试 用 例 设计 。 

被 测 软件 的 需求 描述 如 下 : 

假设 有 一 个 银行 信誉 卡 系统 ,当月 刷卡 销售 额 及 本 年 度 没 按时 还 款 的 次 数 和 当月 赠送 礼 
品 折合 金额 占 总 刷卡 额 的 比例 关系 如 表 3-13 所 示 , 当 未 按时 还 款 次 数 大 于 等 于 其 对 应 的 刷卡 
消费 额 所 允许 的 未 按时 还 款 次 数 时 , 则 免 于 赠送 礼品 ,用 决策 表 设 计 测试 用 例 。 为 了 使 问题 简 
单 化 ,在 此 仅 考虑 本 年 度 的 情况 ,不 考虑 跨 年 的 累计 。 


表 3-13 刷卡 消费 额 与 未 按时 还 款 次 数 及 奖励 额 关系 


刷卡 消费 额 本 年 度 允 许 未 按时 还 款 最 大 次 数 赠送 礼品 折合 金额 占 总 刷卡 额 的 比例 
2000<=N<4000 0 0.3% 
4000 二 N7000 1 0.4% 
7000<N<10 000 和 0.5% 
10 000<N<15 000 3 0.7% 
15 000<N 5 0.8% 


首先 ,必须 确定 条 件 变 量 的 个 数 , 根 据 需 求 进行 分 析 , 有 “刷卡 消费 额 * 和 “本 年 度 未 按时 还 
款 次 数 ” 两 个 条 件 变 量 , 分 别 用 N 和 M 来 表示 。 其 中 变量 N 可 以 划分 成 如 下 等 价 类 ,每 个 等 
价 类 分 别 是 条 件 变 量 N 的 取 值 范围 : 

Ni={2000<N<4000} 

N, ={4000<N<7000} 

N;={7000<N<10 000} 

N={10000<N<15 000} 

Ns={15 000<N} 

对 于 条 件 变量 M, 由 于 其 最 多 的 本 年 度 未 按时 还 款 次 数 为 11 次 ( 隐 含 需求 ), 因 此 合理 的 
等 价 类 划分 如 下 , 且 每 个 等 价 类 分 别 是 条 件 变量 M 的 取 值 : 


M,={0} 
M: 一 {1} 
M;={2} 
M,={3} 
Ms={4,5} 


Ms={6,7,8,9,10,11} 


以 上 分 析 条 件 变量 M 和 NN 的 取 值 分 别 是 等 价 类 ,由 此 依据 扩展 条 目 决策 表 的 设计 原则 
设计 的 决策 表 如 表 3-14 所 示 。 每 个 规则 对 应 一 个 测试 用 例 , 共 10 个 测试 用 例 。 


表 3-14 扩展 决策 表 用 例 设计 实例 


标号 1 2 家 4 5 6 7 8 9 10 
CN Ni Na Na N, Ns 
Ca :M M IM~M| MM IM~M| Mi,M;,M IM~Ms MM;,M,M,| M,M IM~M:| Ms 
Ali: 有 刷 
4 XxX 芒 受 Xx 
卡 奖励 
A,: 
:无 刷 守 四 
卡 奖励 
Nx NX Nx NX 
0 0 NX0.59 0 0 0 
奖 助 博朗 0.3% 0.4% 入 0.7% 0.8% 


决策 表 的 设计 建立 在 软件 规格 说 明 的 基础 上 ,其 设计 基本 步骤 如 下 : 

(1) 根据 规约 分 析 条 件 个 数 和 条 件 的 取 值 ,决定 用 有 限 条 目的 决策 表 还 是 用 扩展 条 目的 

(2) 分 析 理 论 规则 的 个 数 。 假 如 用 有 限 条 目的 决策 表 设计 ,每 个 条 件 取 “ 真 "? 和 “ 假 ”两 个 
值 ,那么 对 于 个 条 件 的 决策 表 规 则 数 为 2" 个 ; 假如 用 扩展 条 目的 决策 表 设 计 , 规 则 的 个 数 
可 以 根据 不 同 变量 划分 的 等 价 类 个 数 的 积 及 结合 其 他 方法 来 确定 。 

(3) 列 出 所 有 可 能 的 行动 桩 。 

(4) 列 出 所 有 的 条 件 条 目 和 行动 条 目 , 并 考虑 “不 可 能 "条目 和 “不 关心 条目。 

(5) 根据 规则 完成 测试 用 例 的 设计 。 

(6) 评审 决策 表 和 测试 用 例 集 。 


3.1.6 Use Case 法 (场景 法 ) 


现在 的 软件 几乎 都 是 用 事件 触发 来 控制 流程 的 , 像 GUI 软件 .游戏 软件 等 事件 触发 时 的 
情景 便 形 成 了 场景 ,而 同一 事件 不 同 的 触发 顺序 和 处 理 结果 就 形成 事件 流 。 这 种 在 软件 设计 
方面 的 思想 也 可 引入 到 软件 测试 中 ,可 以 比较 生动 地 描绘 出 事件 触发 时 的 情景 ,有 利于 测试 设 
计 者 设计 测试 用 例 ,同时 使 测试 用 例 更 容易 理解 和 执行 。 

提出 这 种 测试 思想 的 是 IBM Rational 公司 ,并 在 RUP2000 中 文 版 中 有 详尽 的 解释 和 应 
用 。 在 使 用 场景 法 测试 一 个 软件 的 时 候 , 测 试 流程 按照 一 定 的 事件 流 正确 地 实现 某 个 软件 的 
功能 时 ,这 个 流 称 为 该 软件 功能 的 基本 流 ; 而 凡是 出 现 故障 或 缺陷 或 例外 的 流程 ,就 称 之 为 备 
选 流 。 分 别 将 基本 流 和 备 选 流 加 以 标注 ,这 样 的话 , 备 选 流 就 可 以 是 源 于 基本 流 , 或 是 由 备 选 
流 中 引出 的 。 

用 例 场景 用 来 描述 流 经 用 例 的 路 径 , 从 用 例 开始 到 结束 遍历 这 条 路 径 上 所 有 基本 流 和 备 
选 流 ,也 就 是 说 ,场景 是 由 基本 流 和 备 选 流 组 成 。 下 面 分 析 基 本 流 和 备 选 流 的 概念 。 

1. 理解 规约 确定 基本 流 和 备 选 流 

如 图 3-8 所 示 , 直 黑 线 表示 基本 流 , 是 测试 用 例 对 应 的 最 简单 的 路 径 。 备 选 流 用 带 有 弧 线 
箭头 线 表示 ,一 个 备 选 流 可 能 从 基本 流 开始 ,在 某 个 特定 条 件 下 执行 ,然后 重新 加 入 基本 流 中 
(如 图 3-8 中 的 备 选 流 1 和 3); 也 可 能 起 源 于 另 一 个 备 选 流 (如 备 选 流 2 就 是 起 源 于 备 选 流 1 
的 备 选 流 ) ,或 者 终止 用 例 而 不 再 重新 加 入 到 某 个 流 ( 如 备 选 流 2 和 4)。 经 过 用 例 的 每 条 路 径 


都 由 基本 流 和 备 选 流 来 表示 。 
总 之 ,基本 流 就 是 正常 的 业务 流 ; 备 选 流 就 是 那些 非 正 计 癌 用 全 
常 的 , 即 被 中 断 的 或 是 意外 的 业务 流 。 按 照 图 3-8 所 示 的 基 基本 流 
本 流 和 备 选 流 ,可 以 确定 以 下 不 同 的 用 例 场景 。 备 选 流 1 


备 选 流 3 
场景 1; 基本 流 ; 
场景 2: 基本 流 、 备 选 流 1; 基本 流 ; 本 
场景 3: 基本 流 、 备 选 流 1、 备 选 流 2; 备 选 流 4 此 过 流 2 
场景 4: 基本 流 、 备 选 流 3; 基本 流 ; ee 人 


场景 5: 基本 流 、 备 选 流 3、 备 选 流 1; 基本 流 ; 

场景 6: 基本 流 、 备 选 流 3、 备 选 流 1、 备 选 流 2; 

场景 7: 基本 流 、 备 选 流 4; 

场景 8: 基本 流 、 备 选 流 3、 备 选 流 4; 

场景 9: 基本 流 、 备 选 流 3; 基本 流 、 场 景 3、 基 本 流 , 场 景 3、 基 本 流 。 

在 以 上 的 场景 中 ,场景 2.4 和 7 只 是 经 过 了 一 种 备 选 流 ,而 场景 3,5,6,8,9 经 过 了 一 种 以 
上 的 备 选 流 。 实 际 上 备 选 流 在 一 个 场景 中 可 以 出 现 多 次 甚至 是 无 限 次 ,当然 ,无 限 次 的 情况 实 
际 上 是 不 可 能 的 ,因为 这 样 测试 用 例 的 执行 就 不 会 结束 了 。 需 要 说 明 的 是 ,为 了 能 清晰 地 说 明 
场景 ,这 里 所 举 的 例子 都 是 非常 简单 的 ,在 实际 应 用 中 往往 比较 复杂 。 下 面 再 举 一 个 例子 。 

需求 描述 : 在 一 个 学 生成 绩 管理 系统 中 ,教师 登录 系统 后 ,具有 增加 学 生成 绩 ,删除 学 生 
成 绩 , 修 改 学 生成 绩 和 打印 学 生成 绩 的 功能 。 

其 中 的 教师 修改 学 生成 绩 功能 ,其 基本 流 可 以 理解 为 教师 修改 学 生成 绩 成 功 这 个 业务 流 。 
对 于 备 选 流 ,可 以 理解 为 : 

。 修改 学 生成 绩 时 学 生 信 息 不 存在 ; 

。 修改 学 生成 绩 时 学 生 信 息 存 在 ,但 成 绩 不 存在 ; 

。 修改 学 生成 绩 失 败 。 

可 以 根据 以 上 分 析 的 基本 流 和 备 选 流 设计 不 同 的 场景 。 至 于 其 他 功能 ,基本 流 和 备 选 流 
的 设计 方法 相同 。 

2. 场景 法 设计 步骤 

(1) 根据 说 明 书 或 规约 ,分 析出 系统 或 程序 功能 的 基本 流 及 所 有 可 能 的 备 选 流 。 

(2) 根据 基本 流 和 各 项 备 选 流 设计 不 同 的 场景 。 

(3) 对 每 一 个 场景 生成 相应 的 逻辑 测试 用 例 。 

(4) 根据 敢 辑 测试 用 例 设计 实际 (物理 ) 测 试用 例 。 

(5) 对 生成 的 测试 用 例 集 进行 评审 ,基本 的 覆盖 指标 是 基本 流 和 所 有 的 备 选 流 在 所 设计 
的 场景 中 至 少 覆 盖 一 次 。 

3. 实例 分 析 

这 里 以 一 个 网 上 书店 为 例 说 明 场 景 法 设计 测试 用 例 的 过 程 。 网 上 书店 的 订购 过 程 为 : 用 
户 登 录 到 网 站 后 ,进行 书籍 的 选择 ,当选 好 自己 心仪 的 书籍 后 进行 订购 ,这 时 把 所 需 图 书 放 进 
购物 车 ,等 进行 结账 的 时 候 ,用 户 需 要 登录 自己 注册 的 用 户 , 登 录 成 功 后 ,进行 结账 并 生成 订 
单 ,整个 购物 过 程 结束 。 

(1) 分 析 基 本 流 和 所 有 可 能 的 备 选 流 , 如 表 3-15 所 示 。 

(2) 根据 基本 流 和 备 选 流 来 设计 场景 。 如 表 3-16 所 示 。 


结束 用 例 
图 3-8 基本 流 和 备 选 流 


表 3-15 基本 流 和 备 选 流 
用 户 登 录 到 网 站 ,选择 书籍 ,进行 订购 ,把 所 需 图 书 放 进 购 物 车 ,结账 时 登录 自己 的 


基 本 流 | 用 户 ,登录 成 功 后 生成 订单 ,选择 支付 方式 (银行 卡 在 线 支付 ), 订 单 确认 
ET 用 户 不 存在 

备 迹 流 2 用 户 密码 错误 

备 选 注 3 银行 账号 不 存在 

备 选 流 4 银行 账号 资金 不 

备 秋 流 5 银行 账号 密码 错误 

备 移 流 6 银行 卡 达到 每 日 最 大 消费 金额 (假设 每 天 的 最 大 消费 金额 为 2000 元 ) 
备 迹 流 7 无 选 购书 籍 

备 移 流 X 退出 系统 


表 3-16 中 的 场景 1 一 9 覆盖 了 所 有 的 基本 流 和 备 选 流 。 场 景 10 和 场景 11 是 所 列举 的 另 
外 两 种 情况 的 场景 ,这 样 的 场景 有 很 多 甚至 无 穷 , 因 为 在 一 个 场景 中 任何 一 个 备 选 流 可 能 出 现 
多 次 。 在 设计 场景 时 ,在 满足 基本 流 和 所 有 的 备 选 流 在 所 设计 的 场景 中 至 少 覆 盖 一 次 的 情况 
下 ,其 他 的 场景 根据 业务 流 的 具体 情况 去 设计 ,如 根据 业务 的 使 用 概率 来 设计 等 。 


表 3-16 场景 设计 列表 


场景 1- 购 物 成 功 基本 流 

场景 2- 用 户 不 存在 基本 流 备 选 流 1 

场景 3- 用 户 密码 错误 基本 流 备 选 流 2 

场景 4- 银 行 账号 不 存在 基本 流 备 选 流 3 

场景 5- 银 行 账号 资金 不 足 基本 流 备 选 流 4 

场景 6- 银 行 账号 密码 错误 基本 流 备 选 流 5 

场景 7- 银行 卡 达 到 每 日 最 大 消费 金额 基本 流 备 选 流 6 

场景 8- 无 选 购 书籍 基本 流 备 选 流 7 

场景 9- 退 出 系统 基本 流 备 选 流 x 

场景 10 基本 流 备 选 流 1, 备 选 流 3, 备 选 流 5, 备 选 流 x 
场景 11 基本 流 备 选 流 2, 备 选 流 3, 备 选 流 6 


(3) 逮 辑 测试 用 例 的 设计 。 

对 于 每 一 个 场景 都 需要 设计 测试 用 例 。 可 以 采用 矩阵 或 决策 表 来 设计 和 管理 测试 用 例 。 
下 面 显示 了 一 种 通用 格式 ,其 中 各 行 代表 各 个 多 辑 测 试用 例 , 而 各 列 则 代表 测试 用 例 的 信息 。 
本 例 中 ,对 于 每 个 测试 用 例 ,存在 一 个 测试 用 例 ID、 对 应 的 场景 (条 件 )、 测 试用 例 中 涉及 的 所 
有 数据 元 素 (作为 输入 或 已 经 存在 于 数据 库 中 ) 以 及 预期 结果 。 

通过 从 确定 执行 用 例 场景 所 需 的 数据 元 素 入 手 构建 矩阵 。 然 后 ,对 于 每 个 场景 ,至 少 要 确 
定 包含 执行 场景 所 需 的 适当 条 件 的 测试 用 例 。 例 如 ,在 下 面 的 矩阵 中 ,V( 有 效 ) 用 于 表明 这 个 
条 件 必须 是 VALID( 有 效 的 ) 才 可 执行 基本 流 , 而 I( 无 效 ) 用 于 表明 这 种 条 件 下 将 激活 所 需 备 
选 流 。 表 3-17 中 使 用 的 “n/a”( 不 可 获得 或 不 考虑 ) 表 明 这 个 条 件 不 适用 于 测试 用 例 。 表 3-17 
为 场景 对 应 的 好 辑 测试 用 例 ,在 该 表 中 场景 9、 场景 10、 场 景 11 对 应 的 逮 辑 测试 用 例 有 其 特殊 
性 。 在 场景 9 中 ,在 购书 的 任何 时 刻 或 购书 过 程 中 的 任何 阶段 均 可 以 退出 系统 ,不 能 保证 购书 
过 程 结束 ,该 情况 有 多 种 , 表 3-17 列 出 的 只 是 其 中 的 一 种 逻辑 测试 用 例 。 场 景 10 也 是 类 似 的 
情况 ,不 过 该 场景 必须 覆盖 备 选 流 1、 备 选 流 3 和 备 选 流 5 之 后 才能 退出 系统 ,不 能 保证 购书 
过 程 结 束 。 场 景 11 要 求 该 场景 必须 覆盖 备 选 流 2、 备 选 流 3、 备 选 流 6。 


表 3-17 ”逻辑 测试 用 例 列表 


测试 没 超过 
场景 用 户 | 银行 | 账号 消费 的 | 账面 选 购 | 退出 
用 例 用 户 每 天 最 预期 结果 
编号 (条 件 ) 密码 | 账号 | 密码 | 金额 | 金额 大 金额 书籍 | 系统 
1 场景 1 V V V V V V 区 V V | 成 功 购书 
2 | 场景 2 I n/a | V 区 | VY n/a V | n/a | 用 户 不 存在 
3 | 场景 3 | V I V V | na | V n/a V | n/a | 用 户 密码 错误 
4 | 场景 4| V V I n/a | n/a | n/a | n/a V | n/a | 银行 账号 不 存在 
5 | 场景 5 | V V V V V I V V | n/a | 银行 账号 资金 不 足 
6 | 场景 6 | V V V I V V V V | n/a | 银行 账号 密码 错误 
银行 卡 达 到 每 日 最 大 消 
甸 场景 7 V V V V V V I V n/a 费 金额 
8 | 场景 8 | n/a | n/a | n/a | n/a | n/a | n/a n/a n/a | 无 选 购 书籍 
9 场景 9 V V 和 V V V V V I oa 
10 | 场景 10| I V 于 I n/a | n/a n/a n/a I | 不 成 功 退 出 
11 | 场景 11| V I I V V V I V V 人 


(4) 设计 实际 (物理 ) 测 试用 例 。 
实际 (物理 ?测试 用 例 就 是 前 面 描述 的 迎 辑 测试 用 例 的 实例 化 ,也 就 是 给 逻辑 测试 用 例 填 
上 相应 的 数据 。 例 如 ,上 例 中 的 用 户 名 、 密 码 、 银 行 账号 .账号 密码 .消费 金额 ,账目 金额 .所 购 
书籍 等 给 出 具体 的 值 。 具 体 测试 用 例如 表 3-18 所 示 。 


表 3-18 实际 (物理 ) 测 试用 例 


测试 风 消费 | 账面 | 没 超过 , 
用 例 es 用 户 ed pa 的 金额 | 金额 | 每 天 最 大 | 。 选 购书 籍 a 预期 结果 
编号 (元 ) | (元 ) | 金额 (元 ) 
1 | 场景 1 | Duolc| 654321 |123-54321| 123456 | 580 | 5000 | 有 效 |《 软 件 测试 》 正常 退出 | 成 功 购书 
2 | 场景 2 |Duolc| n/a |123-54321| 123456 | n/a |5000| n/a | 软件 质量 控制 》| n/a 用 户 不 存在 
3 | 场景 3 |Duolc| 543210 |123-54321| 123456 | n/a | 5000 | n/a |《 软 件 工程 n/a pa 人 
4 | 场景 4 |Duolc| 654321 |012-54321| n/a n/a | n/a | n/a |( 一 地 鸡毛 》 n/a ei 
5 | 场景 5 |Duolc| 654321 |123-54321| 123456 | 1008 | 1000 | 有 效 《印象 n/a pe 
6 | 场景 6 |Duolc| 654321 | 123-54321| 654321 | 105 | 1000 | 有效 |( 易 经 》 n/a pe 
银行 卡 达到 
7 | 场景 7 |Duolc| 654321 |123-54321| 123456 | 2005 | 3000 | 无 效 |( 易 经 解读 》 n/a 每 日 最 大 消 
费 金 额 
8 | 场景 8 | n/a | n/a n/a n/a n/a | n/a| n/a |NatureScience |n/a 无 选 购书 籍 
让 天 起 季 购书 成 功 退 
9 | 场景 9 |Duolc| 654321 | 123-54321| 123456 | 200 | 3000 | 有 效 |( 史 记 》 出 或 不 成 功 
正常 退出 退出 


续 表 

测试 a 消费 | 账面 | 没 超过 
用 例 et 用 户 es pe pe 的 金额 | 金额 | 每 天 最 大 | 。 选 购书 籍 预期 结果 
编号 (元 ) | (元 ) | 金额 (元 ) - 

非 正 常 
10 | 场景 10 |duolc| 654321 |113-54321| 123456 | n/a | n/a n/a |n/a 退出 不 成 功 退 出 

正常 或 非 购书 成 功 退 
11 | 场景 11 |Duolc| 123456 | 112-54321| 123456 | 2500 | 3000 | 无 效 |《 二 十 四 史 》 出 或 不 成 功 

正常 退出 退出 


(5) 用 例 评 审 及 完善 。 

评审 对 象 是 表 3-17 和 表 3-18 中 的 测试 用 例 ,主要 关注 测试 用 例 本 身 的 合理 性 ,如 预期 输 
出 是 否 正 确 等 ; 另外 需要 关注 的 是 测试 用 例 是 否 覆盖 了 所 有 的 备 选 流 等 。 对 测试 用 例 不 合理 
的 部 分 进行 完善 修改 。 


3.1.7 正 交 实验 法 


1. 正 交 实验 法 的 由 来 

“拉丁 方 ” 名 称 的 由 来 : 古 希 腊 是 一 个 多 民族 的 国家 ,国王 在 检阅 臣民 时 要 求 每 个 方 队 中 
每 行 有 一 个 民族 代表 ,每 列 也 要 有 一 个 民族 代表 。 

数学 家 在 设计 方 阵 时 ,以 每 一 个 拉丁 字母 表示 一 个 民族 ,所 以 设计 的 方 阵 称 为 “拉丁 方 ”。 
什么 是 n 阶 拉丁 方 ? 用 个 不 同 的 拉丁 字母 排 成 一 个 n 阶 方 阵 (n 二 26) ,如 果 每 行 的 个 字母 
均 不 相同 ,每 列 的 个 字母 均 不 相同 , 则 称 这 种 方 阵 为 nXn 拉丁 方 或 n 阶 拉 丁 方 , 即 每 个 字母 
在 任 一 行 、 任 一 列 中 只 出 现 一 次 。 什 么 是 正 交 拉丁 方 ? 设 有 两 个 阶 的 拉丁 方 ,如 果 将 它们 对 
合 在 一 起 ,恰好 出 现 nw 个 不 同 的 有 序数 对 , 则 称 这 两 个 拉丁 方 为 互相 正 交 的 拉丁 方 ,简称 正 交 
拉丁 方 。 例 如 ,3 阶 拉丁 方 如 下 : 


ABC ABC 

BCA 和 CAB 

CAB BCA 

用 数字 替代 拉丁 字母 : 

123 123 (1,1) (2,2) (3,3) 
231 和 312 ---w= (2,3) (3,1) (1,2) 
312 231 (3,2) (1,3) (2,1) 
2. 正 交 实验 法 


根据 正 交 拉丁 方 的 由 来 ,可 得 知 正 交 实验 设计 (Orthogonal Experimental Design) 是 研究 
多 因素 (也 称 因 子 ) 多 水 平 的 又 一 种 设计 方法 , 它 是 根据 正 交 性 从 全 面 实验 中 挑选 出 部 分 有 代 
表 性 的 点 进行 实验 ,这 些 有 代表 性 的 点 具备 了 “均匀 分 散 , 齐 整 可 比 ” 的 特点 。 正 交 实 验 设计 是 
分 式 析 因 设计 ( 析 因 设计 是 一 种 多 因素 的 交叉 分 组 设计 ) 的 主要 方法 ,是 一 种 高 效率 ,快速 ,经 
济 的 实验 设计 方法 。 

日 本 著名 的 统计 学 家 田口 玄 一 将 正 交 实验 选择 的 水 平 组 合 列 成 表格 , 称 为 正 交 表 。 例 如 
作 一 个 三 因素 三 水 平 的 实验 , 按 全 面 实 验 要 求 , 需 进行 3 二 27 种 组 合 的 实验 , 且 尚 未 考虑 每 一 
组 合 的 重复 数 。 若 按 Ls, (3 ) 正 交 表 安 排 实 验 ,只 需 作 9 次 , 按 Lis (3" ) 正 交 表 进行 18 次 实验 ， 
显然 大 大 减少 了 工作 量 。 因 而 正 交 实验 设计 在 很 多 领域 的 研究 中 已 经 得 到 广泛 应 用 。 


在 利用 决策 表 或 因果 图 来 设计 测试 用 例 时 ,作为 输入 条 件 的 原因 与 输出 结果 之 间 的 因果 
关系 ,有 时 很 难 从 软件 需求 规格 说 明 中 得 到 。 也 往往 由 于 因果 关系 非常 庞大 ,导致 利用 决策 表 
或 因果 图 而 得 到 的 测试 用 例 数目 多 得 惊人 ,给 软件 测试 带 来 沉重 的 负担 。 为 了 有 效 地 ,合理 地 
减少 测试 的 工时 与 费用 ,可 利用 正 交 实验 法 进行 测试 用 例 的 设计 。 

正 交 实 验 设计 方法 是 依据 Galois 理论 ,从 大 量 的 (实验 ) 数 据 ( 测 试用 例 ) 中 挑选 适量 的 、 
有 代表 性 的 点 (用 例 ) ,从 而 合理 地 安排 实验 (测试 ) 的 一 种 科学 实验 设计 方法 。 类 似 的 方法 有 
聚 类 分 析 方法 、 因 子 方法 等 。 下 面 通 过 一 个 例子 来 说 明正 交 实 验 法 。 

需求 描述 : 为 提高 某 化 工 产 品 的 转化 率 ,选择 了 三 个 有 关 因 子 进 行 条 件 实验 : 反应 温度 
A, 反 应 时 间 B, 用 碱 量 C, 并 确定 了 它们 的 实验 范围 如 下 。 

A: 80C~90C; 

B: 90 一 150 分 钟 ; 

C: 5%~7%。 

实验 目的 是 搞 清楚 因子 A.B、C 的 取 值 对 转化 率 有 什么 影响 ,哪些 是 主要 的 ,哪些 是 次 要 
的 ,从 而 确定 最 适合 的 生产 条 件 , 即 温度 .时 间 及 用 碱 量 各 为 多 少 才 能 使 转化 率 最 高 。 这 里 对 
因子 A.B 和 C 在 实验 范围 内 都 选 了 三 个 水 平 ,如 下 所 示 。 

A: Al=80C ,A,=85C ,A,=90C; 

B: Bi 二 90 分 钟 ,Bs 二 120 分 钟 ,B; 王 150 分 钟 ; 

C: C1=5%,C:=6%,C;=7%。 

当然 ,在 正 交 实验 设计 中 ,因子 可 以 是 定量 的 ,也 可 
以 是 定性 的 。 而 定量 因子 各 水 平 间 的 距离 可 以 相等 ,也 
可 以 不 相等 。 这 个 三 因子 三 水 平 的 条 件 实验 通常 有 两 
种 实验 方法 : 取 三 因子 所 有 水 平 之 间 的 组 合 , 共 有 
GCCG=27 次 试验 , 即 ABC,AiBiCs ,ABC … 
AsB3C;。 用 图 3-9 表示 立方 体 的 27 个 节点 。 这 种 实 
验 法 叫做 全 面 实验 法 。 

全 面 实验 对 各 因子 及 各 因子 的 不 同 取 值 间 的 组 合 关系 前 析 得 比较 清楚 ,但 实验 次 数 太 多 。 
特别 是 当 因子 数目 多 , 且 每 个 因子 的 水 平 数目 也 很 多 时 ,实验 量 非常 大 。 如 选 6 个 因子 ,每 个 
因子 取 5 个 水 平时 ,如 要 做 全 面 实验 , 则 需 下 王 15 625 次 实验 ,这 实际 上 是 不 可 能 实现 的 。 如 
果 应 用 将 要 介绍 的 正 交 实 验 法 ,只 做 25 次 实验 就 行 了 。 而 且 在 某 种 意义 上 讲 , 这 25 次 实验 代 
表 了 15 625 次 实验 。 

下 面 用 简单 对 比 法 分 析 , 即 变化 一 个 因子 而 固定 其 他 因子 ,如 首先 固定 B.C 于 Bi、C ,使 
A 变化 : 


图 3-9 全 面 实验 法 取 点 例子 


Ai 
a 
BiC—A;: 
~ 
Ai( 好 结果 ) 
如 得 出 结果 As 最 好 , 则 固定 A 于 A;,C 还 是 C1, 使 B 变化 : 
Bl 
” 
AsC1 一 Bs( 好 结果 ) 
、 
B; 


得 出 结果 以 B, 为 最 好 , 则 固定 B 于 B.A 于 A;. 使 C 变 化 : 
pe 
AsB, 一 Cs (好 结果 ) 
这 
Cs 

实验 结果 以 C; 为 最 好 。 于 是 就 认为 最 好 的 工艺 条 件 是 A; B,C;。 

这 种 方法 一 般 也 有 一 定 的 效果 ,但 缺点 很 多 。 首 先 ,这 种 方法 的 选 点 代表 性 很 差 ,如 按 
上 述 方法 进行 实验 ,实验 点 完全 分 布 在 立体 的 一 个 角 上 ,而 在 其 他 大 的 范围 内 没有 选 点 , 因 
此 这 种 实验 方法 不 全 面 , 所 选 的 工艺 条 件 A;BsC; 不 一 定 是 27 个 组 合 中 最 好 的 。 其 次 ,用 
这 种 方法 比较 条 件 好 坏 时 ,是 把 单个 的 实验 数据 拿 来 进行 数值 上 的 简单 比较 ,而 实验 数据 
中 必然 包含 着 误差 成 分 ,所 以 单个 数据 的 简单 比较 不 能 剔除 误差 ,必然 造成 结论 的 不 稳定 。 
另外 ,对 于 A、B 和 C 先 固定 哪 两 个 变量 的 取 值 或 两 个 相同 变量 取 值 的 不 同 也 决定 最 后 的 实验 
结果 。 

考虑 兼顾 这 两 种 实验 方法 的 优点 ,从 全 面 实验 的 点 中 
选择 具有 典型 性 .代表 性 的 点 ,使 实验 点 在 实验 范围 内 分 
布 得 很 均匀 ,能 反映 全 面 情况 。 但 我 们 又 希望 实验 点 尽量 
地 少 ,为 此 还 要 具体 考虑 一 些 问 题 。 如 上 例 , 对 应 于 A 有 
Ai 、 As: 、As 共 三 个 平面 ,对 应 于 B.C 也 各 有 三 个 平面 , 共 9 
个 平面 。 则 这 9 个 平面 上 的 实验 点 都 应 当 一 样 多 , 即 对 每 
个 因子 的 每 个 水 平 都 要 同等 看 待 。 具 体 来 说 ,每 个 平面 上 
都 有 3 行 .3 列 ,要 求 在 每 行 .每 列 上 的 点 一 样 多 ,这 符合 正 
交 拉 丁 方 的 思想 。 如 图 3-10 所 示 的 设计 ,实验 点 用 @ 
表示 。 

可 以 看 到 ,在 9 个 平面 中 每 个 平面 上 都 恰好 有 3 个 
点 ,而 每 个 平面 的 每 行 每 列 都 有 1 个 点 ,而且 只 有 1 个 点 ,总 共 9 个 点 。 这 样 的 实验 方案 ,实验 
点 的 分 布 很 均匀 ,实验 次 数 也 不 多 。 

当 因 子 数 和 水 平 数 都 不 太 大 时 , 尚 可 通过 作 图 的 办 法 来 选择 分 布 很 均匀 的 实验 点 。 但 是 
因子 数 和 水 平 数 多 了 , 作 图 的 方法 就 不 行 了 。 实 验 工作 者 在 长 期 的 工作 中 总 结 出 一 套 办 法 , 创 
造 出 所 谓 的 正 交 表 。 按 照 正 交 表 来 安排 实验 , 既 能 使 实验 点 分 布 得 很 均匀 ,又 能 减少 实验 次 
数 ,而 且 计算 分 析 简 单 ,能 够 清晰 地 阐明 实验 条 件 与 指标 之 间 的 关系 。 用 正 交 表 来 安排 实验 及 
分 析 实 验 结果 ,这 种 方法 叫 正 交 实 验 设计 法 。 

3. 利用 正 交 实验 设计 测试 用 例 的 步骤 

(1) 提取 功能 说 明 ,构造 因子 一 一 状态 (水 平 ) 表 。 

把 影响 实验 指标 的 条 件 称 为 因子 ,而 影响 实验 因子 的 条 件 叫 因子 的 状态 。 利 用 正 交 实验 
设计 方法 来 设计 测试 用 例 时 ,首先 要 根据 被 测试 软件 的 规格 说 明 书 找 出 影响 其 功能 实现 的 操 
作对 象 和 外 部 因素 ,把 它们 当 作 因子 ; 而 把 各 个 因子 的 取 值 当 作 状态 (水 平 )。 对 软件 需求 规 
格 说 明 中 的 功能 要 求 进 行 划 分 .把 整体 的 、 概 要 性 的 功能 要 求 进行 层 层 分 解 与 展开 ,分 解 成 具 
体 的 有 相对 独立 性 的 、 基 本 的 功能 要 求 。 这 样 就 可 以 把 被 测试 软件 中 所 有 的 因子 都 确定 下 来 ， 
并 为 确定 每 个 因子 的 权 值 提供 参考 的 依据 。 确 定 因子 与 状态 (水 平 ) 是 设计 测试 用 例 的 关键 。 
因此 要 求 尽 可 能 全 面 地 、 正 确 地 确定 取 值 ,以 确保 测试 用 例 的 设计 做 到 完整 与 有 效 。 


图 3-10 正 交 实验 设计 图 例 


(2) 加 权 筛 选 ,生成 因素 分 析 表 。 

对 因子 与 状态 的 选择 可 按 其 重要 程度 分 别 加 权 。 可 根据 各 个 因子 及 状态 的 作用 大 小 、 出 
现 频率 的 大 小 以 及 测试 的 需要 确定 权 值 的 大 小 。 

(3) 利用 正 交 表 构造 测试 数据 集 。 

利用 正 交 实 验 设计 方法 设计 测试 用 例 与 使 用 等 价 类 划分 .边界 值 分 析 、 因 果 图 等 方法 相 
比 , 具 有 以 下 优点 : 节省 测试 工作 工时 ; 可 控制 生成 的 测试 用 例 数量 ; 测试 用 例 具有 一 定 的 覆 

在 使 用 正 交 实验 法 时 ,要 考虑 到 被 测 系统 中 要 准备 测试 的 功能 点 ,而 这 些 功 能 点 就 是 要 获 
取 的 因子 或 因素 。 但 每 个 功能 点 要 输入 的 数据 按 等 价 类 划分 有 多 个 ,也 就 是 每 个 因素 的 输入 
条 件 , 即 状态 或 水 平 值 。 

用 例 设计 的 简洁 实用 步骤 为 : 

(1) 确定 因素 (变量 ); 

(2) 确定 每 个 因素 有 几 个 状态 (水 平 )( 变 量 的 取 值 ); 

(3) 选择 一 个 合适 的 正 交 表 ; 

(4) 把 变量 的 值 映 射 到 表 中 ; 

(5) 把 每 一 行 的 各 因素 水 平 的 组 合作 为 一 个 测试 用 例 ; 

(6) 添加 认为 可 疑 且 没有 在 正 交 表 中 出 现 的 组 ; 

(7) 评审 测试 用 例 集 。 

4. 正 交 表 的 构成 分 析 

行 数 (Runs) : 正 交 表 中 行 的 个 数 , 即 实验 的 次 数 ,也 是 通过 正 交 实验 法 设计 的 测试 用 例 的 
个 数 。 

因素 数 (Factors): 正 交 表 中 列 的 个 数 , 即 要 测试 的 功能 点 。 

状态 或 水 平 数 (Levels) : 任何 单个 因素 能 够 取得 的 值 的 最 大 个 数 。 正 交 表 中 包含 的 值 为 
从 0 到 "水平 数 一 1? 或 从 1 到 “水 平 数 ”, 即 要 测试 功能 点 的 输入 条 件 。 

正 交 表 的 形式 : 

LL# 数 (水 平 数 四 素数》 

例如 Ls(27) ,其 中 7 为 此 表 列 的 数目 (最 多 可 安排 的 因子 数 );， 2 为 因子 的 水 平 数 ; 8 为 此 
表 行 的 数目 (实验 次 数 ) ,如 图 3-11 所 示 。 


因素 水 平 值 
列 号 A 

1 2 3| 4 5| /os] 7 

1 1 1 1 1 1 / 1 1 

2 1 1 1 of of of 0 

3 1 0| 0 1 1 of 0 

行 4 1 of ol 0 0 1 1 
入 5 0 1 0 1 0 1 0 
6 0 1 0| 0 1 0 1 

7 0| 0 1 1 of 0 1 

8 0 0 1 0 1 1 0 


3-11 正 交 表 Ls (2’) 


又 例如 Lis(2X37), 有 7 列 是 3 水 平 的 ,有 1 列 是 2 水 平 的 ,Lis(2X37) 的 数字 告诉 我 们 ， 
用 它 来 安排 实验 ,做 18 个 实验 最 多 可 以 考察 1 个 2 水 平 因子 和 7 个 3 水 平 因子 。 在 行 数 为 mn 
型 的 正 交 表 中 (m,n 是 正 整数 ), 实验 次 数 ( 行 数 ) 二 > (每 列 水 平 数 一 1) 十 1, 如 Las(27)， 
8 二 7X (2 一 1) 十 1, 利 用 上 述 关系 式 可 以 从 所 要 考察 的 因子 水 平 数 来 决定 最 低 的 实验 次 数 ， 
进而 选择 合适 的 正 交 表 。 比 如 要 考察 5 个 3 水 平 因子 及 一 个 2 水 平 因子 , 则 起 码 的 实验 次 数 为 
5X(3 一 1) 十 1X(2 一 1) 十 1 一 12( 次 )。 这 就 是 说 ,要 在 行 数 不 小 于 12, 既 有 2 水 平 列 又 有 3 水 
平 列 的 正 交 表 中 选择 ,Lis(2 X 37) 适合 。 

正 交 表 具 有 两 条 性 质 : 每 一 列 中 各 数字 出 现 的 次 数 都 一 样 多 ; 任何 两 列 所 构成 的 各 有 序 
数 对 出 现 的 次 数 都 一 样 多 。 所 以 称 之 为 正 交 表 。 例 如 在 Ls(3’) 中 (如 表 3-19 所 示 ) ,各 列 中 的 
1.2、3 都 各 自 出 现 3 次; 任何 两 列 ,例如 第 3、4 列 ,所 构成 的 有 序数 对 从 上 向 下 共有 9 种 , 既 没 
有 重复 也 没有 遗漏 。 其 他 任何 两 列 所 构成 的 有 序数 对 也 是 这 9 种 各 出 现 一 次 ,这 反映 了 实验 
点 分 布 的 均匀 性 。 

表 3-19 (3:) 正 交 表 

列 号 


行 号 1 2 3 4 
水 平 


忆 |o| | 虽 | 四 | oo = 
wwwlNININI-|-|- 
wNvNI-|wlN|- 
SliwoliwlNIwlN|- 
-iwlvlviciolwlv|- 


实验 方案 应 该 如 何 设 计 呢 ? 安排 实验 时 ,只 要 把 所 考察 的 每 一 个 因子 任意 地 对 应 于 正 交 
表 的 一 列 ( 一 个 因子 对 应 一 列 ,不 能 让 两 个 因子 对 应 同一 列 ) ,然后 把 每 列 的 数字 “翻译 ”成 所 对 
应 因子 的 水 平 。 这 样 ,每 一 行 的 各 水 平 组 合 就 构成 了 一 个 实验 条 件 ( 不 考虑 没 安排 因子 的 列 ) 。 
对 于 上 例 ,因子 A.B、C 都 是 3 水平 的 ,实验 次 数 要 不 少 于 3X(3 一 1) 十 1=7( 次 ), 可 考虑 选用 
Lo(34)。 因 子 A、B、C 可 任意 地 对 应 于 L, (3 ) 的 某 三 列 ,例如 A、B、C 分 别 放 在 1.2、3 列 , 然 
后 实验 按 行 进行 ,顺序 不 限 , 每 一 行 中 各 因素 的 水 平 组 合 就 是 每 一 次 的 实验 条 件 , 从 上 到 下 就 
是 这 个 正 交 实 验 的 方案 ,如 表 3-20 所 示 。 这 个 实验 方案 的 几何 解释 正好 是 正 交 实验 设计 
图 例 。 

3 个 3 水平 的 因子 做 全 面 实验 需要 3 二 27 次 实验 , 现 用 L, (3 ) 来 设计 实验 方案 ,只 要 做 9 
次 ,工作 量 减少 了 2/3, 而 在 一 定 意义 上 代表 了 27 次 实验 。 

5. 正 交 实验 法 举例 

设计 测试 用 例 时 的 三 种 情况 : 

。 因素 数 (变量 ) ,水 平 数 (变量 值 ) 符 合 正 交 表 。 

。 因素 数 不 相 同 。 

。 水平 数 不 相同 。 


表 3-20 产品 转化 率 的 实验 方案 


列 号 | AI|B|lc 实验 条 件 
实验 号 | 水 平 组 合 
行 号 1|2|3|4 温度 CC) | 时 间 ( 分 ) | 加 碱 量 (%) 

1 1|1|1|1 1 ABC， 80 90 5 
2 弹 区 届 医 测 医 : 2 Al BC 80 120 6 
3 到 医 到 医 到 区: 3 Ai Bs Cs 80 150 7 
4 2 1|12|3| > 4 Az: Bi C。 85 90 6 
5 司 医 恒 医 到 攻 ， 5 A,B,Cs 85 120 
6 司 医 浊 攻 到 柜 : 6 As: BsC 85 150 5 
水 司 区 国医 避 攻 ; 7 As Bi Ca 90 90 7 
8 国医 司 医 曙 医 ) 8 As BC 90 120 5 
9 | 之!| 区 9 AsB;C; 90 150 6 


(1) 因素 数 与 水 平 数 刚 好 符合 正 交 表 。 

下 面 举 个 包括 三 个 控件 的 界面 的 例子 ,如 图 3-12 所 示 。 

这 是 个 人 信息 查询 系统 中 的 一 个 窗口 。 可 以 看 到 
要 测试 的 控件 有 三 个 : 姓名 、 身 份 证 号 码 、 手 机 号 码 , 也 
就 是 要 考虑 的 因素 有 三 个 。 而 每 个 因素 里 的 状态 (水 
平 ) 有 两 个 : 填 与 不 填 。 

选择 正 交 表 时 需要 分 析 : 

@ 表 中 的 因素 数 宇 3; 

@ 表 中 至 少 有 3 个 因素 数 的 水 平 数 之 2; 

@ 行 数 取 最 少 的 一 个 ,即行 数 最 少 为 3X (2 一 1) 十 


|, 个 人 信息 查询 


1 一 4。 图 3-12 一 个 包括 三 个 控件 的 界面 
从 正 交 表 中 开始 查找 ,结果 为 L, (23)。 
变量 映射 结果 如 下 : 
列 号 列 号 
1 2 3 姓名 身份 证 号 手机 号 码 
1 0 0 0 1 填 填 填 
行 号 | 2 0 1 行 号 3 填 不 填 不 填 
3 1 0 1 3 不 填 填 不 填 
4 1 1 0 4 不 填 不 填 填 
0 一 填 1 一 不 填 
对 应 的 测试 用 例如 下 : 


1: 填写 姓名 填写 身份 证 号 .填写 手机 号 

2: 填写 姓名 ,不 填 身份 证 号 ,不 填 手 机 号 

3: 不 填 姓 名 ,填写 身份 证 号 ,不 填 手 机 号 

4: 不 填 姓 名 \ 不 填 身份 证 号 、 填 写 手 机 号 

根据 其 他 测试 方法 增补 以 下 测试 用 例 作 为 补充 : 

5: 不 填 姓 名 ,不 填 身 份 证 号 .不 填 手 机 号 

从 测试 用 例 可 以 看 出 ,如 果 按 每 个 因素 两 个 水 平 数 来 考虑 的 话 ,需要 8 个 测试 用 例 , 而 通 


过 正 交 实 验 法 进行 的 测试 用 例 只 有 5 个 ,减少 了 测试 用 例 数 。 用 最 小 的 测试 用 例 集合 去 获取 
最 大 的 测试 覆盖 率 。 

(2) 因素 数 不 相同 。 

如 果 因 素数 不 同 的 话 ,可 以 采用 包含 的 方法 ,在 正 交 表 公 式 中 找到 包含 该 情况 的 正 交 表 ， 
如 果 有 N 个 符合 条 件 的 正 交 表 , 那 么 选取 行 数 最 少 的 正 交 表 。 

(3) 水 平 数 不 相同 。 

采用 包含 和 组 合 的 方法 选取 合适 的 正 交 表 ,下 面 以 例子 来 说 明 。 

上 面 就 正 交 实验 法 进行 了 讲解 ,现在 再 拿 PowerPoint 软件 打印 功能 作为 例子 ,希望 能 让 
大 家 更 好 地 理解 该 方法 的 具体 应 用 。 

假设 功能 描述 如 下 : 

打印 范围 分 为 全 部 、 当 前 幻灯 片 、 给 定 范围 三 种 情况 ; 

打印 内 容 分 为 幻灯 片 讲义 、 备 注 页 .大纲 视图 4 种 方式 ; 

打印 颜色 / 灰 度 分 为 颜色 、 灰 度 、 黑 白 三 种 设置 ; 

打印 效果 分 为 幻灯 片 加 框 和 幻灯 片 不 加 框 两 种 方式 。 

因素 状态 (水 平 ) 如 表 3-21 所 示 。 


表 3-21 因素 状态 (水 平 ) 


状态 (水 平 )/ 因 素 A 打印 范围 B 打印 内 容 C 打 印 颜色 / 灰 度 DD 打印 效果 
0 全 部 幻灯 片 颜色 幻灯 片 加 框 
1 当前 幻灯 片 讲义 灰 度 幻灯 片 不 加 框 
人 给 定 范围 备注 页 黑白 
3 大 纲 视图 


先 将 中 文字 转换 成 字母 ,便于 设计 。 


状态 /因素 


表 


B 


得 到 新 的 因素 状态 如 表 3-22 所 示 。 
3-22 转换 后 的 因素 状态 表 


0 


B 


D, 


也: 


D; 


B, 


1 
2 
3 


B, 


进一步 分 析 : 


被 测 项 目 中 一 共有 4 个 被 测 对 象 ,每 个 被 测 对 象 的 状态 (水 平 ) 都 不 一 样 。 


选择 正 交 表 : 


Q@ 表 中 的 因素 数 之 4。 
@ 表 中 至 少 有 4 个 因素 的 水 平 数 过 2。 
@ 行 数 取 最 少 的 一 个 , 即 满足 (3: X41 X21!) 的 最 少 行 数 2X (3 一 1) 十 1 X (4 一 1) 十 1X 


(2 一 1) 十 1 一 9。 


最 后 选中 正 交 表 公 式 Lis (4 ) ,对 应 的 正 交 和 矩阵 如 表 3-23 所 示 。 
用 字母 替代 正 交 和 矩阵 如 表 3-24 所 示 。 


表 3-23 Lic(4) 正 交 表 


1 2 3 4 5 
1 0 0 0 0 0 
2 0 1 1 1 1 
3 0 2 2 2 2 
4 0 3 3 3 3 
5 1 0 1 2 3 
6 1 0 3 2 
x 1 2 3 0 1 
8 1 3 2 1 0 
9 2 0 2 3 1 
10 2 1 3 2 0 
11 2 2 0 1 3 
12 2 3 1 0 2 
13 3 0 3 1 2 
14 3 1 2 0 3 
15 3 2 和 3 0 
16 3 3 0 2 1 

表 3-24 替代 后 的 正 交 表 

1 2 3 4 5 
1 A Bl GC D 0 
2 A B; C: D; 1 
3 A B; Cs 2 2 
4 Ai B, 3 3 3 
5 A: Bl C: 2 3 
6 A: B; CGC 3 2 
7 A: B; 3 Di 1 
8 A: B, Cs D; 0 
9 A: B Cs 3 1 
10 A: 也 > 3 2 0 
11 As: B; Cn D; 3 
12 A: B, C: Di 2 
13 3 Bl 3 D; 2 
14 3 B; Ca D, 3 
15 3 B; Ca2 3 0 
16 3 B, CG 2 1 


从 表 3-24 中 了 解 到 ,第 一 列 水 平 值 为 3、 第 三 列 水 平 值 为 3、 第 四 列 水 平 值 3、2 都 需要 由 
各 自 的 字母 替代 。 注 意 ,应 该 按照 顺序 进行 替代 ,如 果 不 够 蔡 代 , 则 继续 从 头 开始 蔡 代 ,如 第 一 


= 高 级 软件 测试 技术 


列 的 4 个 “3” 分 别 用 Ai、A。 和 As 替代 ,由 于 没有 A, ,因此 最 后 一 个 “3” 用 A, 蔡 代 。 最 后 得 到 


表 3-25。 
表 3-25 各 自 替 代 后 的 正 交 表 

1 和 3 4 5 
1 Ai Bi 人 nm 0 
2 Al B; Cs D; 1 
3 A 了 Ba Cs D， 2 
4 A 也 & BD » 
5 A: B Cz D， 3 
6 A: 了 B。 GC D， 2 
7 A: B, 6 D, 1 
8 A: B, Cs D， 0 
9 As B Cs D， 
10 As B, G D, 0 
11 As Bi Cn D， 3 
12 As B, Cz D， 2 
13 Al B， C D， 2 
14 A: B; Cs D， 3 
15 4: B; Ca D; 0 
16 A B, C D, 1 


第 五 列 去 掉 , 因 为 没有 意义 。 通 过 分 析 , 由 于 4 个 因素 里 有 三 个 的 水 平 值 小 于 3, 因 此 从 
第 13 行 到 第 16 行 的 测试 用 例 可 以 忽略 。 这 样 就 可 以 设计 12 个 测试 用 例 ,有 具体 用 例如 下 : 


测试 用 例 编号 PPT-ST-FUNCTION-PRINT-001 

测试 项 目 测试 PowerPoint 打印 功能 

测试 标题 打印 PowerPoint 文件 A 全 部 的 幻灯 片 ,有 颜色 ,加 框 

重要 级 别 高 

预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测 试 . ppt 

操作 步骤 (1) 打开 打印 界面 ; 


(2) 打印 范围 选择 “全 部 ”; 

(3) 打印 内 容 选 择 “ 幻 灯 片 ”; 
(4) 颜色 / 灰 度 选择 “颜色 ”; 
(5) 选中 “幻灯 片 加 框 " 复 选 框 ; 
(6) 单 击 “ 确 定 ” 按 钮 。 


预期 输出 打印 出 全 部 幻灯 片 , 有 颜色 且 已 加 框 。 
测试 用 例 编号 PPT-ST- FUNCTION-PRINT-002 
测试 项 目 测试 PowerPoint 打印 功能 


测试 标题 打印 PowerPoint 文件 A 全 部 的 幻灯 片 为 讲义 , 灰 度 ,不 加 框 


重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步骤 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “全 部 ”; 
(3) 打印 内 容 选 择 “ 讲 义 ”; 
(4) 颜色 / 灰 度 选择 * 灰 度 ”; 
(5) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 全 部 幻灯 片 为 讲义 , 灰 度 且 不 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-003 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 全 部 的 备注 页 ,黑白 ,加 框 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步骤 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “全 部 ”; 
(3) 打印 内 容 选择 “备注 页 ”; 
(4) 颜色 / 灰 度 选择 “黑白 ”; 
(5) 选中 “幻灯 片 加 框 " 复 选 框 ; 
(6) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 全 部 备注 页 ,黑白 且 已 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-004 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 全 部 的 大 纲 视图 ,黑白 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步骤 (1) 打开 打印 界面 ; 


预期 输出 


(2) 打印 范围 选择 “全 部 ”; 

(3) 打印 内 容 选择 “大 岗 视图 ”; 
(4) 颜色 / 灰 度 选择 “黑白 ”; 
(5) 单 击 “确定 ”按钮 。 

打印 出 全 部 大 岗 视图 ,黑白 


测试 用 例 编号 PPT-ST-FUNCTION-PRINT-005 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 当前 幻灯 片 , 灰 度 ,加 框 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步 又 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “当前 幻灯 片 ”; 
(3) 打印 内 容 选 择 “ 幻 灯 片 ”; 
(4) 颜色 / 灰 度 选择 “ 灰 度 ”; 
(5) 选中 “幻灯 片 加 框 " 复 选 框 ; 
(6) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 当前 幻灯 片 , 灰 度 且 已 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-006 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 当前 幻灯 片 为 讲义 ,黑白 ,加 框 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步骤 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “当前 幻灯 片 ”; 
(3) 打印 内 容 选 择 “ 讲 义 ”; 
(4) 颜色 / 灰 度 选择 “黑白 ”; 
(5) 选中 “幻灯 片 加 框 " 复 选 框 ; 
(6) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 当前 幻灯 片 为 讲义 ,黑白 且 已 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-007 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 当前 幻灯 片 的 备注 页 ,有 颜色 ,不 加 框 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步 又 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “当前 幻灯 片 ”; 
(3) 打印 内 容 选 择 “ 备 注 页 ”; 


(4) 颜色 / 灰 度 选择 “颜色 ”; 
(5) 单 击 “ 确 定 ” 按 钮 。 


预期 输出 打印 出 当前 幻灯 片 的 备注 页 ,有 颜色 且 不 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-008 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 当前 幻灯 片 的 大 纲 视图 ,有 颜色 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步 又 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “当前 幻灯 片 ”; 
(3) 打印 内 容 选择 “大 岗 视图 ”; 
(4) 颜色 / 灰 度 选择 “颜色 ”; 
(5) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 当前 幻灯 片 为 讲义 ,黑白 且 已 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-009 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 给 定 范 围 的 幻灯 片 ,黑白 ,不 加 框 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打 印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步骤 (1) 打开 打印 界面 ; 
(2) 打印 范围 选择 “幻灯 片 ”; 
(3) 打印 内 容 选 择 “ 幻 灯 片 ”; 
(4) 颜色 / 灰 度 选择 “黑白 ”; 
(5) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 给 定 范围 的 幻灯 片 , 黑 白 且 不 加 框 
测试 用 例 编号 PPT-ST-FUNCTION-PRINT-010 
测试 项 目 测试 PowerPoint 打印 功能 
测试 标题 打印 PowerPoint 文件 A 给 定 范围 的 幻灯 片 为 讲义 ,有 颜色 ,加 框 
重要 级 别 中 
预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 
操作 步骤 (1) 打开 打印 界面 ; 


(2) 打印 范围 选择 “幻灯 片 ”; 


(3) 打印 内 容 选 择 “ 幻 灯 片 ”; 
(4) 颜色 / 灰 度 选择 “颜色 ”; 
(5) 单 击 “ 确 定 ” 按 钮 。 


预期 输出 打印 出 给 定 范围 的 幻灯 片 为 讲义 ,有 颜色 且 加 框 

测试 用 例 编号 PPT-ST-FUNCTION-PRINT-011 

测试 项 目 测试 PowerPoint 打印 功能 

测试 标题 打印 PowerPoint 文件 A 给 定 范围 的 幻灯 片 的 备注 页 , 灰 度 ,加 框 
重要 级 别 中 

预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打印 机 
输入 文件 A: D:\ 系 统 测试 . ppt 

操作 步骤 (1) 打开 打印 界面 ; 


(2) 打印 范围 选择 “幻灯 片 ”; 
(3) 打印 内 容 选 择 “ 备 注 页 ”; 
(4) 颜色 / 灰 度 选择 “ 灰 度 ”; 
(5) 选中 “幻灯 片 加 框 ” 复 选 框 ; 
(6) 单 击 “ 确 定 ” 按 钮 。 


预期 输出 打印 出 给 定 范围 的 幻灯 片 的 备注 页 , 灰 度 且 加 杠 

测试 用 例 编号 PPT-ST-FUNCTION-PRINT-012 

测试 项 目 测试 PowerPoint 打印 功能 

测试 标题 打印 PowerPoint 文件 A 给 定 范围 的 幻灯 片 的 大 纲 视图 , 灰 度 
重要 级 别 中 

预 置 条 件 PowerPoint 文件 A 已 被 打开 ,计算 机 主机 已 连接 有 效 打 印 机 
输入 文件 A: D:\ 系 统 测试 , ppt 

操作 步 又 (1) 打开 打印 界面 ; 


(2) 打印 范围 选择 “幻灯 片 ”; 
(3) 打印 内 容 选择 大纲 视图 ”; 
(4) 颜色 / 灰 度 选择 “ 灰 度 ”; 
(5) 单 击 “ 确 定 ” 按 钮 。 
预期 输出 打印 出 给 定 范围 的 幻灯 片 的 大 纲 视图 , 灰 度 


总 而 言 之 , 正 交 实 验 法 在 软件 测试 中 是 一 种 有 效 的 方法 。 例 如 ,在 平台 参数 配置 方面 ,要 
选择 哪 种 组 合 方式 是 最 好 的 ,每 个 参数 可 能 就 是 一 个 因素 ,参数 的 不 同 取 值 就 是 水 平 , 这 样 可 
以 采用 正 交 实验 法 设计 出 最 少 的 测试 组 合 ,达到 有 效 的 测试 目的 。 又 如 ,图 形 界面 中 有 多 个 控 
件 ,每 个 控件 均 有 多 种 取 值 情况 的 测试 可 以 考虑 用 正 交 实验 法 进行 测试 ,在 以 上 的 例子 中 也 有 
体现 。 


3.1.8 黑 盒 测试 方法 选择 的 策略 


本 章 中 讲 到 的 黑 盒 测试 用 例 设计 方法 包括 等 价 类 划分 法 、 边 界 值 分 析 法 、 错 误 推测 法 、 因 
果 图 法 .决策 表 法 、 正 交 实 验 设计 法 ,场景 法 等 。 这 些 测 试用 例 的 设计 方法 不 是 单独 存在 的 , 具 
体 到 每 个 测试 项 目 里 可 能 会 用 到 多 种 方法 。 不 同类 型 的 软件 有 各 自 的 特点 ,每 种 测试 用 例 设 
计 的 方法 也 有 各 自 的 特点 ,针对 不 同 软件 如 何 利用 这 些 黑 盒 方法 是 非常 重要 的 ,在 实际 测试 
中 ,往往 是 综合 使 用 各 种 方法 才能 有 效 地 提高 测试 效率 和 测试 覆盖 度 ,这 就 需要 认真 掌握 这 些 
方法 的 原理 ,积累 更 多 的 测试 经 验 , 以 有 效 地 提高 测试 水 平 。 

下 面 是 各 种 测试 方法 选择 的 综合 策略 ,可 供 读者 在 实际 应 用 的 测试 过 程 中 参考 。 

(1) 首先 考虑 等 价 类 划分 ,包括 输入 条 件 和 输出 条 件 的 等 价 类 划分 ,将 无 限 测试 变 成 有 限 
测试 ,这 是 减少 工作 量 和 提高 测试 效率 最 有 效 的 方法 。 可 以 充分 利用 不 同 的 等 价 类 方法 ,最 好 
既 考 虑 有 效 的 等 价 类 ,也 考虑 无 效 的 等 价 类 。 

(2) 在 任何 情况 下 都 必须 使 用 边界 值 分 析 方法 。 经 验 表明 ,用 这 种 方法 设计 出 的 测试 用 
例 发 现 软件 缺陷 的 能 力 最 强 。 但 是 ,边界 值 法 没有 考虑 变量 之 间 的 依赖 关系 ,所 以 ,如 果 被 测 
软件 的 变量 有 比较 严密 的 逻辑 关系 ,最 好 在 使 用 边界 值 法 的 同时 考虑 使 用 决策 表 和 因果 图 之 
类 的 方法 。 

(3) 可 以 用 错误 推测 法 追加 一 些 测 试用 例 作 补充 ,这 需要 依靠 测试 工程 师 的 智慧 和 经 验 。 

(4) 如 果 软 件 的 功能 说 明 中 含有 输入 条 件 的 组 合 情 况 ,也 就 是 输入 变量 之 间 有 很 强 的 依 
赖 关系 , 则 一 开始 就 可 选用 因果 图 法 或 决策 表 法 。 但 是 不 要 忘记 用 边界 值 法 或 其 他 方法 设计 
测试 用 例 作 补充 。 

(5) 如 果 被 测 软件 的 业务 逻辑 清晰 ,同时 又 是 系统 级 别 的 测试 ,那么 可 以 考虑 用 场景 法 来 
设计 测试 用 例 。 涉 及 系统 级 别 的 测试 时 ,在 考虑 使 用 场景 法 的 同时 ,理解 需求 规约 尤为 重要 。 
在 分 析 测 试 是 否 达到 了 所 有 的 功能 点 覆盖 时 ,功能 点 的 划分 要 根据 具体 情况 划分 得 越 细 越 好 ， 
但 要 考虑 每 个 功能 的 高 内 聚 性 和 低 耦 合 性 。 同 时 ,综合 考虑 使 用 其 他 测试 方法 。 

(6) 对 于 参数 配置 类 的 软件 ,选用 正 交 实验 法 可 以 达到 测试 用 例 数量 少 且 分 布 均匀 的 
目的 。 


3.2 和 白 念 测试 技术 


3.2.1 白 盒 测 试 概念 


在 第 1 章 中 简 述 了 白 盒 测试 是 一 种 用 于 检查 代码 是 否 按照 预期 工作 的 验证 技术 ,又 称 结 
构 测 试 (Structural Testing)、 罗 辑 驱 动 测试 (Logicdriven Testing ) 或 基于 程序 的 测试 
(Program-based Testing)。“ 白 盒 ? 是 指 可 视 的 “盒子 ?是 指 被 测试 的 软件 。 所 以 说 白 盒 测试 
是 一 种 可 视 的 测试 软件 的 方法 , 即 它 把 测试 对 象 看 做 一 个 透明 的 盒子 ,测试 人 员 要 了 解 程序 结 
构 和 处 理 过 程 ,按照 程序 内 部 逻辑 测试 程序 ,检查 程序 中 的 每 条 通路 是 否 按照 预定 要 求 正 确 
正 作 。 

白 盒 测试 的 主要 特点 是 它 主 要 针对 被 测 程序 的 源 代码 ,测试 者 可 以 完全 不 考虑 程序 的 功 
能 ,所 以 ,如 果 需 求 规约 中 的 功能 没有 实现 ,那么 白 盒 测试 很 难 发 现 。 白 盒 测试 能 解决 程序 中 
的 逻辑 错误 和 不 正确 假设 。 当 我 们 的 代码 实现 了 不 合理 或 不 正确 的 条 件 和 控制 时 ,这 些 错误 


往往 功能 性 测试 很 难 发 现 , 只 有 通过 白 盒 测试 方法 找到 问题 所 在 。 人 为 地 把 一 个 详细 设计 或 
伪 代 码 翻译 为 某 种 程序 设计 语言 后 ,有 可 能 产生 某 些 人 为 的 错误 ,虽然 语法 检查 机 制 能 够 发 现 
很 多 错误 。 但 是 ,还 有 一 些 错误 只 有 通过 动态 白 盒 测试 才 会 被 发 现 。 而 人 为 错误 在 每 个 迎 辑 
路 径 上 几率 是 一 样 的 。 

另 一 个 原因 就 在 于 功能 测试 本 身 的 局 限 性 。 简 单 地 说 ,如 果 程 序 实现 了 需求 规约 里 没有 

要 求 的 功能 ,功能 测试 是 无 法 发 现 的 (病毒 就 是 这 样 一 个 例子 ) ,这 将 会 给 软件 带 来 隐患 ,而 白 
盒 测试 能 够 发 现 这 样 的 缺陷 。 正 如 Beizer 所 说 的 :“ 错 误 潜 伏 在 角落 里 ,聚集 在 边界 上 ”, 相 对 
而 言 , 白 盒 测试 更 容易 发 现 它 。 
白 盒 测 试 的 测试 方法 有 代码 检查 法 ,静态 结构 分 析 法 .静态 质量 度量 法 .逻辑 覆盖 法 、 基 本 
路 径 测试 法 、 域 测试 ,符号 测试 .Z 路 径 覆 盖 、 程 序 变 异 以 及 程序 控制 流 分 析 、 数 据 流 分 析 等 。 
其 中 多 数 方法 比较 成 熟 , 也 有 较 高 的 实用 价值 ,个 别 的 方法 仍 有 些 问题 没有 得 到 圆满 的 解决 。 
例如 ,符号 测试 和 路 径 测试 的 分 析 方 法 都 是 很 重要 的 ,但 在 程序 分 支 过 多 及 程序 路 径 过 多 时 ， 
已 有 的 方法 将 会 显示 出 它们 的 局 限 性 。 本 文 主要 介绍 程序 结构 分 析 、 逮 辑 覆 盖 和 程序 插 装 等 
技术 ,而 代码 检查 法 .静态 结构 分 析 法 ,静态 质量 度量 法 放 在 静态 测试 方法 中 讲解 ,也 可 称 这 些 
方法 为 静态 白 盒 测试 ,在 第 2 章 已 经 分 析 。 其 中 的 域 测试 ,符号 测试 .Z 路 径 覆 盖 、 程 序 变 异 将 
在 本 章 中 作 简单 描述 。 本 节 后 续 提 及 的 白 盒 测 试 方法 均 是 指 动态 白 盒 测试 方法 。 

白 盒 测 试 主要 用 于 单元 测试 .集成 测试 及 其 回归 测试 ,但 实际 上 白 盒 测试 的 思想 也 可 以 用 
于 系统 级 别 的 测试 。 单 元 测试 就 是 对 一 组 相关 组 件 或 单元 的 独立 测试 。 对 单元 进行 白 盒 测试 
是 用 来 检查 单元 编码 是 否 正确 。 而 大 多 数 对 单元 进行 的 白 盒 测试 是 代码 人 员 自 己 进 行 , 也 称 
为 自 测试 (Self-testing) ,软件 公司 常常 不 对 其 测试 过 程 中 所 发 现 的 缺陷 进行 跟踪 ,也 就 是 不 公 
开 单 元 测试 的 缺陷 。 因 此 ,是 代码 人 员 自 己 先 找 出 错误 或 缺陷 ,在 还 没有 提交 给 测试 人 员 之 前 
先 修复 它 。 但 有 些 时 候 , 除 了 代码 人 员 进 行 的 自 测试 之 外 ,还 可 能 进行 专门 的 单元 测试 ,这 主 
要 视 项 目的 实际 情况 而 定 。 集 成 测试 是 对 集成 到 一 起 的 软件 组 件 和 硬件 组 件 进行 的 测试 ,用 
于 评估 这 些 组 件 之 间 能 否 进行 正确 的 交互 。 集 成 测试 的 主要 目的 就 是 为 了 检查 各 种 组 件 之 间 
的 接口 ,测试 员 可 以 通过 白 盒 测试 来 检查 各 个 单元 接口 ,也 就 是 将 各 个 组 件 通 过 接口 连 在 一 
起 。 由 于 回归 测试 可 以 用 于 不 同 的 测试 层次 ,是 一 种 具有 选择 性 的 对 系统 或 组 件 的 重复 测试 ， 
用 来 验证 对 软件 所 做 的 修改 是 否 带 来 不 良 的 影响 ,系统 或 组 件 是 否 仍 然 符合 特定 的 需求 ,因此 
在 应 用 白 盒 测试 方法 进行 单元 测试 和 集成 测试 时 ,回归 测试 一 样 适用 。 在 实际 的 测试 过 程 中 ， 
对 测试 用 例文 档 也 必须 做 配置 管理 , 即 对 白 盒 的 单元 测试 和 集成 测试 用 例 进 行 版 本 控制 ,为 后 
续 的 回归 测试 带 来 方便 ,因为 回归 测试 往往 只 执行 以 前 测试 的 部 分 测试 用 例 。 

在 白 盒 测试 过 程 中 ,程序 员 通 常 要 开发 桩 模块 和 驱动 模块 来 配合 白 盒 测试 的 进行 。 驱 动 
模块 就 是 用 于 触发 被 测 模块 的 一 个 软件 模块 ,一 般 要 提供 测试 输入 、 控 制 和 监测 并 报告 测试 结 
果 。 最 简单 的 形式 就 是 使 用 一 行 能 够 调用 一 个 方法 或 模块 的 代码 。 例 如 ,如 果 想 移动 游戏 中 
的 一 个 人 物 ,驱动 代码 就 可 能 是 如 下 这 样 : 

movePerson( Person, diceRol1); 

这 个 驱动 代码 就 可 能 被 主 方法 调用 。 而 白 盒 测试 用 例 将 要 执行 这 行 驱动 代码 并 且 检查 人 
物 的 位 置 ( 如 使 用 person. getPosition() 方 法 ) ,以 确定 人 物 现 在 所 处 的 位 置 。 桩 模块 就 是 能 够 
代替 被 测 模块 所 调用 的 软件 模块 的 程序 ,可 以 模拟 实际 组 件 行为 的 组 件 或 对 象 。 例 如 , 若 
movePerson 方法 还 没有 完成 .那么 就 可 以 暂时 使 用 下 面 所 示 的 代码 ,把 人 物 移动 到 标识 为 1 


的 位 置 。 


Public void movePerson(Person Person, int diceValue){ 
Person. setPosition(1);} 


以 上 的 驱动 方法 movePerson 是 被 主 方法 调用 的 ,但 是 在 实际 的 测试 中 将 驱动 方法 
movePerson 写成 主 方法 也 是 可 行 的 ,直接 运行 这 个 主 方法 调用 被 测 的 方法 。 当 然 , 最 后 要 由 
正确 的 程序 多 辑 来 代替 这 个 方法 。 但 是 ,开发 桩 模块 的 程序 员 可 以 调用 正在 开发 的 代码 中 的 
方法 ,甚至 是 一 个 还 没有 规定 预期 行为 的 方法 。 桩 模块 和 驱动 模块 通常 被 看 做 是 随时 可 以 抛 
弃 的 代码 ,但 是 这 些 代码 往往 要 被 充分 使 用 ,最 好 对 桩 代码 和 驱动 代码 进行 配置 管理 。 


3.2.2 程序 结构 分 析 


程序 的 结构 形式 是 白 盒 测试 的 主要 依据 。 将 从 控制 流 分 析 、 数 据 流 分 析 和 信息 流 分 析 的 
不 同方 面 讨 论 几 种 机 械 性 的 方法 分 析 程 序 结构 。 我 们 的 目的 总 是 要 找到 程序 中 隐藏 的 各 种 错 
误 或 缺陷 。 
1. 控制 流 分 析 
由 于 非 结 构 化 程序 会 给 测试 、 排 错 和 程序 的 维护 带 来 许多 不 必要 的 困难 ,人 们 有 理由 要 求 
写 出 的 程序 是 结构 良好 的 。20 世纪 70 年 代 以 来 ,结构 化 程序 的 概念 逐渐 被 人 们 普遍 接受 。 
体现 这 一 要 求 对 于 若干 的 语言 ,如 Pascal、C 等 并 不 困难 ,因为 它们 都 具有 反映 基本 控制 结构 
的 相应 控制 语句 。 但 对 于 早期 开发 的 语言 来 说 ,要 做 到 这 一 点 ,程序 编写 人 员 需 要 特别 注意 ， 
不 应 忽视 程序 结构 化 的 要 求 。 使 用 汇编 语言 编写 程序 ,要 注意 这 个 问题 的 道理 就 更 为 明显 了 。 
正 是 由 于 这 个 原因 ,系统 地 检查 程序 的 控制 结构 成 为 十 分 有 意义 的 工作 。 
1) 控制 流 图 (程序 图 ) 
程序 流程 图 (flowchart) 又 称 框图 ,也 许 是 人 们 最 熟悉 ,也 是 最 容易 接受 的 一 种 程序 控制 
结构 的 图 形 表示 。 在 这 种 图 上 的 框 内 常常 标明 了 处 理 要 求 或 条 件 ,这 些 在 做 路 径 分 析 时 是 不 
重要 的 。 为 了 更 加 突出 控制 流 的 结构 ,需要 对 程序 流程 图 做 些 简化 。 在 图 3-13 中 给 出 了 简化 
的 例子 。 其 中 图 3-13(a) 是 一 个 含有 两 出 口 判断 和 循环 的 程序 流程 图 ,把 它 简化 成 图 3-13(b) 
的 形式 , 称 这 种 简化 了 的 流程 图 为 控制 流 图 (Control-flowgraph) 或 程序 图 。 在 控制 流 图 中 只 
有 两 种 图 形 符号 ,它们 是 : 
。 节点: 以 标 有 编号 的 圆圈 表示 。 它 代表 了 程序 流程 图 中 和 矩形 框 所 表示 的 处 理 , 也 表示 
两 个 或 多 出 口 判断 以 及 两 条 或 多 条 流 线 相交 的 汇合 点 。 
。 控制 流 线 或 弧 : 以 箭头 表示 。 它 与 程序 流程 图 中 的 流 线 是 一 致 的 ,表明 了 控制 的 顺 
序 。 为 讨论 方便 ,控制 流 线 通常 标 有 名 字 , 如 图 3-13 中 所 标的 a、b、c 等 。 为 便于 在 机 
器 上 表示 和 处 理 控制 流 图 ,可 以 把 它 表示 成 矩阵 的 形式 , 称 为 控制 流 图 和 矩阵 (Control- 
flow graph matrix)。 图 3-14 表示 了 图 3-13 的 控制 流 图 和 矩阵。 这 个 矩阵 有 5 行 5 列 ， 
是 由 该 控制 图 中 含有 的 5 个 节点 决定 的 。 和 矩阵 中 6 个 元 素 a、b、c、d、e 和 ff 的 位 置 决定 
于 它们 所 联接 节点 的 号 码 。 例 如 , 弧 d 在 矩阵 中 处 于 第 3 行 第 4 列 , 那 是 因为 它 在 控 
制 流 图 中 联接 了 节点 3 至 节点 4。 这 里 必须 注意 方向 。 图 中 节点 4 至 节点 3 是 没有 弧 
的 ,矩阵 中 第 4 行 第 3 列 也 就 没有 元 素 。 
路 径 测 试 法 的 基本 依据 就 是 程序 图 ,程序 图 是 有 向 图 。 程 序 图 由 节点 (其 中 程序 图 的 开始 
节点 称 为 源 节点 ,结束 节点 称 为 汇 节 点 ) 和 边 组 成 ,节点 表示 语句 或 语句 片段 , 边 表示 控制 流 。 


d 
e 
(a) 程序 流程 图 (b) 控制 流 图 (程序 图 ) f 
图 3-13 ”程序 流程 图 和 控制 流 图 图 3-14 控制 流 图 矩阵 


如 IF 语句 对 应 的 程序 图 中 ,节点 表示 语句 片段 , 即 多 个 语句 片段 构成 一 个 完整 的 语句 。 再 如 ， 
赋值 语句 是 一 个 完整 的 语句 构成 一 个 程序 图 节点 。 对 边 的 理解 是 : 如 果 i 和 j 是 程序 图 中 的 
节点 ,从 节点 到 节点 j 存在 一 条 边 , 当 且 仅 当 对 应 节点 j 的 语句 片段 或 语句 可 以 在 对 应 节点 i 
的 语句 片段 或 语句 之 后 立即 执行 。 

程序 图 中 基本 的 控制 结构 对 应 的 图 形 符号 如 图 3-15 所 示 。 


oS 


(a) 顺序 结 (b) IF 选 择 结 (ce) WHILE 循环 结构 (d) CASE 多 分 支 结 
UNTIL 循 环 结构 


图 3-15 程序 图 的 图 形 符号 


如 果 判 断 中 的 条 件 表达 式 是 复合 条 件 , 即 条 件 表 
达 式 是 由 一 个 或 多 个 多 辑 运算 符 (or\and 和 not) 连 接 
的 多 辑 表达 式 , 则 需要 改变 复合 条 件 的 判断 为 一 系列 
只 有 单个 条 件 的 嵌 套 的 判断 。 例 如 ,对 应 图 3-16 所 示 A 
的 复合 逻辑 下 的 图 3-16(a) 所 示 程 序 迎 辑 的 复合 条 件 。 THENx: © 
的 判定 ,应 该 画 成 图 3-16(b) 所 示 的 程序 图 。 条 件 语句 。 C2) 
IF a AND b 中 条 件 a 和 条 件 b 各 有 一 个 只 有 单个 条 


件 的 判断 节点 。 
下 面 是 一 个 判断 三 角形 类 型 的 伪 代 码 程序 ,以 此 四 种 了 带 香 全 和 的 种 国 
为 例 来 构造 程序 图 。 图 3-16 复合 逻辑 的 程序 图 


1. Program triangle2'Structured programming version of simpler specification 
2. Dima,b,c Rs Integer 
3. Dim IsATriangle As Boolean 

'Step 1: Get Input 


4. Output("Enter 3 integers which are sides of a triangle") 
5. Input(a,b,c) 
6. Output("Side A is ",a) 
7. Qutput("Side B is ",b) 
8. Output("Side C is ",c) 
'Step 2: Is A Triangle? 
9. IF(a<b+c)AND (b<a+c)AND (c<a+b) 


10. THEN IsATriangle = True 
Wl ELSE IsATriangle= False 
12. ENDIf 


'Step 3: Determine Triangle Type 
13. IF IsATriangle 


14. THER If(a=b)AND(b=c) 

15. Then Output("Equilateral") 

16. ELSE If(ab)AND(ac)AND(bAc) 
YE THEN Output("Scalene") 
18. ELSE Qutput("Isosceles") 
19. ENDIF 

20. ENDIF 

ls ELSC Output("Not a Triangle") 

22. ENDIF 


23. END triangle2 


对 应 的 程序 图 如 图 3-17 所 示 。 在 程序 图 中 为 了 表示 方便 ,对 应 的 判断 内 条 件 简 化 表示 
如 下 : 

a<b++c>al; b<at+c>bl; c<at+b>cl; a 一 b 一 d1; b=c—>el; a 天 b 一 f1; a 天 c 一 8g1; 
bc>hl。 

2) 程序 结构 的 基本 要 求 

对 于 程序 结构 提出 以 下 4 点 基本 要 求 ,这 些 要 求 是 写 出 的 程序 不 应 包含 : 

(1) 转向 并 不 存在 的 标号 ; 

(2) 没有 用 的 语句 标号 ; 

(3) 从 程序 入 口 进 入 后 无 法 达到 的 语句 ; 

(4) 不 能 达到 程序 出 口语 句 的 语句 。 

显然 ,提出 这 些 要 求 是 合理 的 。 在 编写 程序 时 稍 加 注意 ,做 到 这 几 点 也 是 很 容易 的 。 这 里 
更 为 关心 的 是 如 何 进行 检测 ,把 以 上 4 种 问题 从 程序 中 找 出 来 。 目 前 对 这 4 种 情况 的 检测 主 
要 通过 编译 器 和 程序 分 析 工 具 来 实现 。 

2. 数据 流 分 析 

数据 流 分 析 最 初 是 随 着 编译 系统 要 生成 有 效 的 目标 码 而 出 现 的 ,这 类 方法 主要 用 于 代码 
优化 。 近 年 来 ,数据 流 分 析 方 法 在 软件 测试 中 也 得 到 成 功 地 运用 ,用 以 查找 如 引用 未 定义 变量 
等 程序 错误 ,也 可 用 来 查找 对 以 前 未 曾 使 用 的 变量 再 次 赋值 等 数据 流 异常 的 情况 。 找 出 这 些 
错误 是 很 重要 的 ,因为 这 常常 是 常见 程序 错误 的 表现 形式 ,如 错 拼 名 字 、 名 字 混 淆 或 是 丢失 了 
语句 。 这 里 将 首先 说 明 数 据 流 分 析 的 原理 ,然后 指明 它 可 揭示 的 程序 错误 。 

1) 数据 流 问 题 

如 果 程 序 中 某 一 语句 执行 时 能 改变 某 程序 变量 V 的 值 , 则 称 V 是 被 该 语句 定义 的 。 如 果 
某 一 语句 的 执行 引用 了 内 存 中 变量 V 的 值 , 则 说 该 语句 引用 变量 V。 例 如 ,语句 : 

X: 一 了 Y 十 Z 


定义 了 X, 引 用 了 和 2Z ,而 语句 : 


图 3-17 判断 三 角形 类 型 的 程序 图 


IFY > Z then goto exit 
只 引用 了 YY 和 2Z。 输入 语句 : 
READ X 
定义 了 X。 输 出 语句 : 
WRITE X 
引用 了 X。 执 行 某 个 语句 也 可 能 使 变量 失去 定义 ,成 为 无 意义 的 。 例 如 在 PORTRAN 中 , 循 
环 语句 PO 的 控制 变量 在 经 循环 的 正常 出 口 离 开 循环 时 ,就 变 成 无 意义 的 了 。 
图 3-18 给 出 了 一 个 小 程序 的 控制 流 图 ,同时 指明 了 每 一 语句 定义 和 引用 的 变量 。 可 以 看 
出 ,第 一 个 语句 定义 了 三 个 变量 X、Y 和 Z, 这 表明 它们 的 值 是 程序 外 赋 给 的 。 例 如 ,该 程序 是 
以 此 三 变量 为 输入 参数 的 过 程 或 子 程序 。 同 样 ,出 口语 句 引用 Z 表明,Z 的 值 被 送 给 外 部 环 
境 。 该 程序 中 含有 两 个 错误 : 
(1) 语句 2 使 用 了 变量 W ,而 在 此 之 前 并 未 对 其 定义 。 
(2) 语句 5.6 使 用 变量 V, 这 在 第 一 次 执行 循环 时 也 未 对 其 定义 过 。 
此 外 ,该 程序 还 包含 两 个 异常 : 
(1) 语句 6 对 2Z 的 定义 从 未 使 用 过 。 
(2) 语句 8 对 W 的 定义 也 从 未 使 用 过 。 


节点 被 定义 变量 被 引用 变量 

1 
XYZ 

x WX 
3 WY 
a YZ 
> Y VY 
5 Zz Vz 
7 V X 
W Y 
9 Zz V 
0 Z z 
11 2 


3-18 ”控制 流 图 及 其 定义 和 引用 的 变量 


当然 ,程序 中 包含 的 有 些 异常 ,如 (1)、(2) 还 会 引起 执行 的 错误 。 不 过 这 一 情况 表明 ,也许 
程序 中 含有 错误 ; 也 许可 以 把 程序 写 得 更 容易 理解 ,从 而 能 够 简化 验证 工作 ,以 及 随后 的 维护 
工作 (去 掉 那 些 多 余 的 语句 一 般 会 缩短 执行 时 间 ,不 过 在 此 并 不 关心 这 些 )。 目 前 通过 编译 器 
或 程序 分 析 工 具 , 通 过 数据 流 分 析 可 以 查找 出 对 未 定义 变量 的 使 用 和 未 曾 使 用 的 定义 。 

2) 数据 流 分 析 应 用 的 其 他 方面 

在 优化 的 编译 系统 中 ,数据 流 分 析 除 了 用 于 以 前 已 说 明 的 以 外 ,还 用 于 多 种 目的 。 一 个 常 
数 传播 的 例子 是 : 如 果 变量 V 的 所 有 定义 (该 定义 达到 引用 V 的 一 个 特定 语句 ) 都 把 同一 已 
知 常数 赋 给 该 变更 ,对 V 的 引用 便 可 用 这 一 常数 所 代替 。 这 里 是 一 个 普通 的 例子 。 程 序 段 : 


ci:=3x(a+b) 


可 以 用 下 列 程序 段 代替 : 


常数 传播 除了 能 节省 执行 时 间 外 ,还 能 提高 程序 正文 的 清晰 性 ,确认 系统 可 以 表明 进行 这 
种 修改 的 可 能 性 。 另 一 个 例子 是 找 出 循环 内 的 不 变 定义 。 这 种 定义 并 不 引用 其 值 在 执行 循环 
时 可 改变 的 任何 变量 。 在 优化 的 编译 系统 中 查找 不 变 定 义 是 很 重要 的 ,因为 它 可 使 得 将 这 一 
定义 从 循环 中 移出 , 放 在 循环 前 面 或 是 放 在 循环 后 面 ,从 而 减少 它 的 执行 次 数 。 在 程序 确认 
中 ,也 对 不 变 定义 感 兴趣 ,因为 它 会 提醒 用 户 注意 粗心 的 程序 设计 。 

3. 信息 流 分 析 

直到 目前 ,信息 流 分 析 主 要 用 在 验证 程序 变量 间 信 息 的 传输 遵循 的 保密 要 求 。 然 而 ,近来 
发 现 可 以 导出 程序 的 信息 流 关 系 , 这 就 为 软件 开发 和 确认 提供 了 十 分 有 益 的 工具 。 为 了 说 明 
信息 流 分 析 的 性 质 ,以 下 给 出 整除 算法 作为 例子 。 图 3-19 是 这 一 算法 的 程序 。 图 3-20 是 三 
个 关系 的 表 。 其 中 第 一 个 表 ( 如 图 3-20(a) 所 示 ) 给 出 每 一 语句 执行 时 所 用 到 其 输入 值 的 变量 。 
例如 ,从 图 3-19 的 算法 很 明显 地 看 出 ,M 的 输入 值 在 语句 2 中 得 到 直接 使 用 ,由 于 这 一 语句 将 M 
的 值 传送 给 R,M 的 初始 值 也 间接 地 用 于 语句 3 和 语句 5。 而 且 , 语 句 3 中 表达 式 R= N 的 值 
决定 了 语句 4 的 重复 执行 次 数 , 即 对 Q 多 少 次 重复 赋值 ,就 是 说 M 的 值 也 间接 地 用 于 语句 4。 


语句 号 begin 
, Qn MN QR QR 
2 R:=M; 
1 1|y 区 
3 while R>=N do 
2|v po 和 Nilv|y 
begin 
4 Q:=Q+1; 有 | | 3|v |v 
5 R:=R—N 4Iy|y 4 
end 5SIy|y SIvy|y 
a (第 一 个 关系 ”(b) 第 二 个 关系 。 (e) 检查 
图 3-19 整除 算法 图 3-20 整除 算法 中 输入 值 .语句 与 输出 值 的 关系 


第 二 个 关系 (如 图 3-20(b) 所 示 ) 给 出 了 其 执行 可 能 直接 或 间接 影响 输出 变量 终 值 的 一 些 
语句 。 可 以 看 出 ,所 有 语句 都 可 能 影响 到 商 Q 的 值 。 而 语句 1 和 语句 4 并 未 关系 到 余数 R 的 
值 。 最 后 的 关系 表明 了 哪个 输入 值 可 能 直接 或 间接 地 影响 到 输出 值 。 针 对 结构 良好 的 程序 快 
速算 法 (只 需 多 项 式 时 间 ) 已 经 开发 出 来 ,可 用 以 建立 这 些 关 系 ,这 在 程序 的 测试 中 是 非常 有 用 
的 。 例 如 ,第 一 个 关系 能 够 表明 对 未 定义 变量 的 所 有 可 能 的 引用 。 第 二 个 关系 在 查找 错误 中 
也 是 有 用 的 ,比如 假定 某 个 变量 的 计算 值 在 使 用 以 前 被 错误 地 改写 了 ,这 可 能 是 因为 有 并 不 影 
响 任 何 输出 值 的 语句 被 发 现 。 在 程序 的 任何 指定 点 查 出 其 执行 可 能 影响 某 一 变量 值 的 语句 ， 
这 在 程序 排 错 和 程序 验证 中 都 是 很 有 用 的 。 第 三 个 输入 输出 关系 还 提供 一 种 检查 ,看 看 每 个 


输出 值 是 否 由 相关 的 输入 值 ,而 不 是 其 他 值 导出 。 
3.2.3 ”逻辑 覆盖 测试 法 


结构 测试 是 依据 被 测 程序 的 逻辑 结构 设计 测试 用 例 , 驱 动 被 测 程序 运行 完成 测试 。 结 构 
测试 中 的 一 个 重要 问题 是 测试 进行 到 什么 地 步 就 达到 要 求 ,可 以 结束 测试 了 。 这 就 是 说 需要 
给 出 结构 测试 的 覆盖 准则 。 下 面 给 出 的 几 种 逻辑 覆盖 测试 方法 都 是 从 各 自 不 同 的 方面 出 发 ， 
为 设计 测试 用 例 提 出 依据 的 。 为 方便 讨论 ,将 结合 一 个 小 程序 段 加 以 说 明 : 


IF((A>1)AND(B= 0))THEN 
X=X/A 
IF((A= 2)OR(X> 1 ) THEN 
X=X+1 
其 中 AND 和 OR 是 两 个 逻辑 运算 符 。 图 3-21 给 出 了 
它 的 流程 图 ,a、b、c、d 和 e 是 控制 流 上 的 若干 程序 点 。 
1. 语句 覆盖 
语句 覆盖 的 含义 是 在 测试 时 ,首先 设计 若干 个 测试 用 
例 , 然 后 运行 被 测 程序 ,使 程序 中 的 每 个 可 执行 语句 至 少 
执行 一 次 。 这 里 所 谓 “ 若 干 个 ", 自 然 是 越 少 越 好 。 在 上 述 
程序 段 中 ,如 果 选 用 的 测试 用 例 是 : 
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则 程序 按 路 径 ace 执行 。 这 样 .该 程序 段 的 4 个 语句 均 得 
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时 
X=X+1 
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3-21 被 测 程序 段 流程 图 


及 = 
B= 
程序 按 路 径 abe 执行 , 便 未 能 达到 语句 覆盖 。 

从 程序 中 每 个 语句 都 得 到 执行 这 一 点 来 看 ,语句 覆盖 的 方法 似乎 能 够 比较 全 面 地 检验 每 
一 个 语句 。 但 它 也 绝 不 是 完美 无 缺 的 。 假 如 这 一 程序 段 中 两 个 判断 的 逻辑 运算 有 问题 ,例如 ， 
第 一 个 判断 的 运算 符 AND 错 成 运算 符 OR 或 是 第 二 个 判断 中 的 运算 符 OR 错 成 了 运算 符 
AND。 这 时 仍 使 用 上 述 前 一 个 测试 用 例 CASE1 ,程序 仍 将 按 路 径 ace 执行 。 这 说 明 虽 然 也 做 
到 了 语句 覆盖 , 却 发 现 不 了 判断 中 逮 辑 运算 的 错误 。 此 外 ,还 可 以 很 容易 地 找 出 已 经 满足 了 语 
句 覆 盖 , 却 仍然 存在 错误 的 例子 。 如 有 一 程序 段 : 


IF(I 二 0) 
THENI = 了 


如 果 错 写成 ; 


IF(I > 0) 

THENI = J 

假定 给 出 的 测试 数据 执行 该 程序 段 时 ,I 的 值 大 于 0, 则 了 工 被 赋予 J 的 值 ,这 样 虽然 做 到 了 
语句 覆盖 ,但 是 却 掩盖 了 其 中 的 错误 。 

实际 上 ,和 后 面 介 绍 的 其 他 几 种 多 辑 覆盖 比较 起 来 ,语句 覆盖 是 比较 弱 的 覆盖 原则 。 做 到 
了 语句 覆盖 可 能 给 人 们 一 种 心理 的 满足 ,以 为 每 个 语句 都 经 历 过 ,似乎 可 以 放心 了 。 其 实 这 仍 
然 是 不 十 分 可 靠 的 。 语 句 覆盖 在 测试 被 测 程序 中 ,除去 对 检查 不 可 执行 语句 有 一 定 作 用 外 ,并 
没有 排除 被 测 程序 包含 错误 的 风险 。 必 须 看 到 ,被 测 程序 并 非 语句 的 无 序 堆积 ,语句 之 间 的 确 
存在 着 许多 有 机 的 联系 。 

2. 判定 (判断 ) 覆 盖 

按 判定 覆盖 准则 进行 测试 是 指 设 计 若 干 测试 用 例 ,运行 被 测 程序 ,使 得 程序 中 每 个 判断 的 
取 真 分 支 和 取 假 分 支 至 少 经历 一 次 , 即 判断 的 真 假 值 均 被 满足 。 判 定 覆 盖 又 称 为 分 支 覆 盖 或 
判断 覆盖 。 仍 以 上 述 程 序 段 为 例 , 若 选用 的 两 组 测试 用 例 是 : 


.CRSE1 


则 可 分 别 执行 路 径 ace 和 abd, 从 而 使 两 个 判断 的 4 个 分 支 ce 和 b、d 分 别 得 到 覆盖 。 当 然 ， 
也 可 以 选用 另外 两 组 测试 用 例 : 


则 可 分 别 执行 路 径 acd 及 abe, 同 样 也 可 覆盖 4 个 分 支 。 注 意 到 ,上 述 两 组 测试 用 例 不 仅 满足 
了 判定 覆盖 ,同时 还 做 到 语句 覆盖 。 从 这 一 点 看 ,似乎 判定 覆盖 比 语 句 覆 盖 更 强 一 些 。 假 如 此 
程序 段 中 的 第 2 个 判断 条 件 X 二 1, 错 写成 X<1, 使 用 上 述 测试 用 例 CASE5 ,照样 能 按 原 路 径 
执行 (abe) ,而 不 影响 结果 。 这 个 事实 说 明 , 只 做 到 判定 覆盖 仍 无 法 确定 判断 内 部 条 件 的 错误 。 
因此 ,需要 有 更 强 的 迎 辑 覆盖 准则 去 检验 判断 内 的 条 件 。 以 上 仅 考 虑 了 两 出 口 的 判断 ,还 应 把 
判定 覆盖 准则 扩充 到 多 出 口 判断 (如 CASE 语句 ) 的 情况 。 

3. 条 件 覆 盖 

条 件 覆 盖 是 指 设计 若干 测试 用 例 ,执行 被 测 程序 以 后 ,要 使 每 个 判断 中 每 个 条 件 的 可 能 取 
值 至 少 满足 一 次 。 在 上 述 程序 段 中 ,第 一 个 判断 应 考虑 到 : 

A 二 1, 取 真 值 , 记 为 Tl1; 

A 二 1, 取 假 值 , 即 A<1, 记 为 Fl1; 

B= 二 0, 取 真 值 , 记 为 T2; 

B= 二 0, 取 假 值 , 即 B 取 0, 记 为 F2。 

第 二 个 判断 应 考虑 到 : 

A 二 2, 取 真 值 , 记 为 T3; 

A=2, 取 假 值 , 即 A 关 2, 记 为 F3; 

X 二 1, 取 真 值 , 记 为 T4; 

X 二 1, 取 假 值 , 即 X 委 1, 记 为 F4。 

给 出 三 个 测试 用 例 : CASE6、CASE7 和 CASE8 ,执行 该 程序 段 所 走路 径 及 覆盖 条 件 如 
表 3-26 所 示 。 


表 3-26 CASE6 一 CASE8 条 件 覆盖 结果 


测试 用 例 ABX 所 走路 径 覆盖 条 件 

CASE 6 203 ace T1,T2,T3,T4 
CASE 7 101 abd F1,T2,F3,F4 
CASE 8 211 abe T1,F2,T3,F4 


从 表 3-26 中 可 以 看 到 ,三 个 测试 用 例 把 4 个 条 件 的 8 种 情况 均 作 了 覆盖 。 进 一 步 分 析 
表 3-26, 获 盖 了 4 个 条 件 的 8 种 情况 的 同时 ,把 两 个 判断 的 4 个 分 支 b、c、d 和 似乎 也 被 覆 
盖 。 这 样 是 否 可 以 说 做 到 了 条 件 覆盖 ,也 就 必然 实现 了 判定 覆盖 呢 ? 来 分 析 另 一 种 情况 ,假定 
选用 两 个 测试 用 例 是 CASE 9 和 CASE 8 ,执行 该 程序 段 的 覆盖 情况 如 表 3-27 所 示 。 


表 3-27 CASE 8 和 CASE 9 条 件 覆盖 结果 


测试 用 例 ABX 所 走路 径 覆盖 分 支 覆盖 条 件 
CASE 9 103 abe be Fl1,T2,F3,T4 
CASE 8 211 abe be T1,F2,T3,F4 


这 一 覆盖 情况 表明 ,覆盖 了 条 件 的 测试 用 例 不 一 定 覆 盖 了 分 支 。 事 实 上 , 它 只 覆盖 了 4 个 
分 支 中 的 两 个 。 为 解决 这 一 矛盾 ,需要 对 条 件 和 分 支 兼顾 。 


4. 判定 一 条 件 覆盖 

判定 一 条 件 覆 盖 要 求 设计 足够 的 测试 用 例 ,使 得 判断 中 每 个 条 件 的 所 有 可 能 至 少 满足 一 
次 ,并 且 每 个 判断 本 身 的 判定 结果 也 至 少 出 现 一 次 。 根 据 判定 一 条 件 覆 盖 的 定义 ,只 需 设 计 下 
面 两 个 测试 用 例 便 可 覆盖 例子 的 8 个 条 件 取 值 以 及 4 个 判断 分 支 , 执 行程 序 段 的 覆盖 情况 如 
表 3-28 所 示 。 


表 3-28 CASE8 和 CASE11 的 判定 一 条 件 覆盖 结果 


测试 用 例 ABX 所 走路 径 覆盖 分 支 覆盖 条 件 
CASE 11 204 ace ce T1,T2,T3,T4 
CASE 8 211 abe be Fl1,F2,F3,F4 


判断 一 条 件 覆 盖 的 不 足 之 处 : 表面 上 看 来 ,判断 一 条 件 覆 盖 测 试 了 所 有 条 件 的 取 值 ,但 实 
际 上 并 非 如 此 ,而 是 某 些 条 件 掩盖 了 另 一 些 条 件 ( 由 于 多 重 条 件 判定 ) 。 例 如 ,对 条 件 表达 式 
(A>1)AND(CB=0) 来 说 , 若 (A 二 1) 的 测试 结果 为 FALSE, 可 以 立即 确定 表达 式 的 结果 为 
FALSE, 这 时 往往 就 不 再 测试 (B= 二 0) 的 取 值 了 ,因此 ,条 件 (B=0) 就 没有 被 检查 。 同 样 ,对 条 
件 表达 式 (A 二 2)OR(X 记 1) 来 说 ,车 (A 二 2) 的 测试 结果 为 TURE, 就 立即 确定 表达 式 的 结果 
为 TURE, 这 时 ,条 件 (X>1) 就 没有 被 检查 。 因 此 ,采用 判断 一 条 件 覆 盖 测 试 , 多 辑 表达 式 中 
的 错误 不 一 定 能 够 查 得 出 来 。 

5. 条 件 组 合 覆盖 

条 件 组 合 覆 盖 就 是 设计 足够 的 测试 用 例 ,运行 所 测 程序 ,使 得 每 个 判断 的 所 有 可 能 的 条 件 
取 值 组 合 至 少 执行 一 次 。 例 中 两 个 判断 各 包含 两 个 条 件 ,这 4 个 条 件 在 两 个 判断 中 可 能 有 8 
种 组 合 , 它 们 是 : 


(1) A>1,B=0,， 
(2) A>1,BA0,， 
(3) A<1,B=0, 
(4) A<1,BA0,， 
(5) A=2,X>1, 
(6) A=2,X<1, 
(7) Az2,X>1, 
(8) A#2,X<1, 


所 为 TyT23 
记 为 T1,F2; 
记 为 Fl5T2; 
记 为 Fl,F2; 


记 为 T3,T4; 


记 为 T3,F4; 
记 为 F3,T4; 
记 为 F3,F4。 


这 里 设计 了 4 个 测试 用 例 , 用 以 覆盖 上 述 8 种 条 件 组 合 , 具 体 如 表 3-29 所 示 。 


表 3-29 条 件 组 合 覆 盖 结 果 


测试 用 例 ABX 覆盖 组 合 号 所 走路 径 覆盖 条 件 

CASE 1 203 0g ace T1,T2,T3,T4 
CASE 8 211 @ @ abe T1,F2,T3,F4 
CASE 9 103 @ 0 abe Fl1,T2,F3,T4 
CASE 10 人 @ @ abd F1,F2,F3,F4 


注意 到 ,这 一 程序 段 共有 4 条 路 径 。 以 上 4 个 测试 用 例 固 然 覆盖 了 条 件 组 合 , 同 时 也 覆盖 


了 4 个 分 支 ,但 仅 覆 盖 了 3 条 路 径 , 却 漏 掉 了 路 径 acd。 前 面 讨论 的 多 种 覆盖 准则 ,有 的 虽 提 到 
了 所 走路 径 问 题 ,但 尚未 涉及 到 路 径 的 覆盖 ,而 路 径 能 和 否 全 面 覆 盖 在 软件 测试 中 是 个 重要 问 


题 , 因 为 程序 要 取得 正确 的 结果 ,就 必须 消除 遇 到 的 各 种 障碍 , 沿 着 特定 的 路 径 顺利 执行 。 如 
果 程 序 中 的 每 一 条 路 径 都 得 到 考验 ,才能 说 程序 受到 了 全 面 检验 。 


6. 路 径 覆 盖 

按 路 径 覆 盖 要 求 进行 测试 是 指 设 计 足 够 多 的 测试 用 例 , 要 求 覆 盖 程 序 中 所 有 可 能 的 路 径 。 
针对 例 中 的 4 条 可 能 路 径 有 : 

ace, 记 为 Ll; 

abd, 记 为 L2; 


abe, 记 为 L3; 

acd, 记 为 L4。 

给 出 4 个 测试 用 例 : CASE 1、CASE 7、.CASE 8 和 CASE 11 ,使 其 分 别 覆 盖 这 4 条 路 径 ， 
如 表 3-30 所 示 。 


表 3-30 路径 覆盖 结果 


测试 用 例 ABX 覆盖 条 件 测试 用 例 ABX 覆盖 条 件 
CASE 1 203 ace(L1) CASE 8 211 abe(L3) 
CASE7 101 abd(L2) CASE 11 301 acd(L4) 


这 里 所 讨论 的 程序 段 非常 简短 ,也 只 有 4 条 路 径 。 但 在 实际 问题 中 ,一 个 不 太 复 杂 的 程 
序 , 其 路 径 数 都 是 一 个 庞大 的 数字 ,要 在 测试 中 覆盖 这 样 多 的 路 径 是 无 法 实现 的 。 为 解决 这 一 
难题 ,只 得 把 覆盖 的 路 径 数 压缩 到 一 定 限度 内 ,例如 ,程序 中 的 循环 体 只 执行 有 限 次 。 其 实 , 即 
使 对 于 路 径 数 很 有 限 的 程序 已 经 做 到 了 路 径 覆 盖 ,仍然 不 能 保证 被 测 程序 的 正确 性 。 例 如 ,在 
上 述 语 句 覆盖 的 描述 中 最 后 给 出 的 程序 段 中 出 现 的 错误 也 不 是 路 径 材 盖 可 以 发 现 的 。 由 此 看 
出 ,各 种 结构 测试 方法 都 不 能 保证 程序 的 正确 性 。 这 一 残酷 的 事实 对 热心 测试 的 程序 人 员 似 
乎 是 一 个 沉重 的 打击 。 但 要 记 住 ,测试 的 目的 并 非 要 证 明 程序 的 正确 性 ,而 是 要 尽 可 能 找 出 程 
序 中 的 错误 或 缺陷 。 确 实 并 不 存在 一 种 十 全 十 美的 测试 方法 ,能 够 发 现 所 有 的 错误 或 缺陷 。 
想 要 撤 下 几 网 把 湖 中 的 鱼 全 都 捕 上 来 是 做 不 到 的 ,软件 测试 是 有 局 限 性 的 。 

下 面 重点 讨论 当 路 径 数 庞大 或 路 基数 接近 无 穷 的 情况 下 如 何 有 效 地 、 合 理 地 压缩 路 径 数 
量 , 以 达到 基 路 径 覆 盖 。 

1) 基 路 径 算法 讨论 
重新 分 析 图 1-11 所 示 的 程序 图 ,根据 我 们 的 分 析 , 对 于 这 样 一 个 带 有 循环 的 程序 图 如 果 
要 穷 举 测试 程序 ,遍历 所 有 可 执行 路 径 需要 设计 5” 十 5* 十 57 十 … 十 十 5° 个 测试 用 例 ,这 是 
一 个 非常 庞大 的 数值 ,在 实际 的 测试 过 程 中 不 可 能 做 到 。 为 了 解决 这 个 难题 ,需要 把 测试 用 例 
覆盖 的 路 径 数 压缩 到 一 定 限 度 内 ,并 且 被 覆盖 的 这 些 路 径 应 该 具有 代表 性 。 

先 回顾 向 量 空间 的 概念 ,向量 空间 的 概念 是 解决 这 个 问题 的 理论 基础 。 假 设 有 一 个 向 量 
空间 VV, 二 {zx1,z2 ,XT3，… ,Tn，…}, 其 中 向 量 空间 中 的 每 个 向 量 zx; 为 n 维 。 假 设 向 量 空间 w， 
有 一 个 基 y1 ,ys，… ,ym，…，yp(p 为 基 中 向 量 的 个 数 ,向 量 y; 对 应 于 向 量 空间 W, 中 的 某 个 向 
量 ) ,向 量 空间 V, 的 基 必 须 满足 yi ,yo，… ,yn，… ,ys 之 间 是 互相 独立 的 ; yi yya Yn" yy 
之 间 不 能 互相 线性 表示 ; V, 中 的 任何 一 个 向 量 均 能 由 这 个 基 中 的 向 量 来 线性 表示 ,例如 zs 一 
J1 十 0XXys 十 0Xys 十 … 十 5ys 一 ys 就 是 一 种 线性 表示 。 向 量 空间 的 基 不 唯一 。 

从 以 上 的 分 析 中 能 得 出 如 下 结论 : 假设 把 程序 图 中 的 每 个 可 执行 路 径 看 成 向 量 空间 的 一 
个 向 量 , 程 序 图 中 所 有 的 可 执行 路 径 将 构成 一 个 向 量 空 间 , 向 量 空间 中 的 向 量 可 以 是 无 穷 多 。 


如 果 能 从 由 所 有 可 执行 路 径 构成 的 向 量 空 间 中 找到 该 向 量 空间 的 一 个 基 , 那 么 程序 图 的 所 有 
可 执行 路 径 将 能 由 这 个 基 中 的 向 量 来 线性 表示 。 因 此 ,设计 测试 用 例 时 只 要 将 这 个 向 量 空间 
的 基 中 的 每 个 向 量 所 对 应 的 路 径 转换 成 测试 用 例 就 可 以 了 ,因为 所 有 其 他 可 执行 路 径 均 能 由 
向 量 空间 的 这 个 基 中 的 向 量 对 应 的 路 径 来 线性 表示 。 完 成 这 样 的 测试 设计 称 为 基 路 径 测试 ， 
其 结果 达到 了 基 路 径 覆 盖 , 也 叫 McCabe 覆盖 。 

现在 要 解决 的 问题 是 : 

(1) 基 路 径 中 的 独立 路 径 个 数 ,也 就 是 向 量 空间 的 基 中 的 向 量 个 数 。 

(2) 基 路 径 中 的 路 径 如 何 得 到 ,也 就 是 如 何 得 到 向 量 空间 的 一 个 基 。 

解决 第 一 个 问题 的 办 法 是 根据 程序 图 的 环 路 复杂 性 (也 称 程序 图 的 独立 路 径 数 ) 公 式 来 
计算 : 

Ve 一 e 一 ?7 十 2 

其 中 的 。 为 程序 图 的 边 数 ,n 为 程序 图 的 节点 数 ,Ve 是 基 路 径 中 独立 的 路 径 个 数 。 

解决 第 二 个 问题 的 办 法 是 执行 寻找 基 路 径 的 算法 ,算法 描述 如 下 : 

@ 根据 程序 图 ,利用 公式 Ve 二 e 一 n 十 2 得 到 独立 路 径 数 。 

@ 根据 程序 图 找到 一 条 基线 路 径 ,这 条 基线 路 径 不 唯一 。 基 线路 径 应 该 满足 : 是 从 源 节 
点 开始 到 汇 节点 结束 的 路 径 ; 尽量 长 ; 尽量 多 地 经 过 出 度 大 于 或 等 于 2 的 节点 ; 基线 路 径 对 
应 的 业务 最 好 是 执行 正常 的 业务 流 。 

@ 以 这 条 基线 路 径 为 基础 ,从 这 条 基线 路 径 的 第 一 个 节点 开始 ,从 头 往 后 搜索 以 找到 第 
一 个 出 度 大 于 或 等 于 2 的 节点 (包括 第 一 个 节点 本 身 ) ,以 这 个 节点 为 轴 进 行 旋 转 ,将 这 个 节点 
在 基线 路 径 中 的 儿子 节点 和 不 在 基线 路 径 中 的 其 他 儿子 节点 互 换 ,如 果 不 在 基线 路 径 中 的 其 
他 儿子 节点 数 大 于 一 个 , 则 任意 选择 一 个 即 可 ,同时 ,尽量 多 地 保留 基线 路 径 中 的 其 他 节点 不 
变 ( 称 为 回溯 ) ,这 样 就 得 到 了 另 一 条 路 径 。 

团 下 一 步 一 般 情 况 下 仍然 是 以 基线 路 径 为 基础 ,从 刚才 找到 的 出 度 大 于 或 等 于 的 节点 开 
始 往 后 继续 寻找 ,执行 名 的 同样 流程 得 到 其 他 路 径 。 

@ 如 果 基 线路 径 中 的 出 度 大 于 或 等 于 2 的 节点 全 部 找到 ,并 根据 加 的 流程 得 到 了 其 他 所 
有 可 能 的 路 径 , 这 时 路 径 总 数 仍然 没有 达到 Ve 的 值 , 则 可 以 把 以 基线 路 径 旋转 得 到 的 路 径 看 
成 另 一 个 基线 路 径 ,同样 执行 @@ 一 直到 得 到 的 路 径 数 量 等 于 Ve 为 止 。 

通过 以 上 算法 得 到 的 这 组 路 径 就 是 基 路 径 。 由 于 基线 路 径 的 选择 不 同 、 旋 转 节点 的 选择 
不 同 均 可 以 影响 到 基 路 径 , 因 此 基 路 径 不 唯一 。 

值得 注意 的 是 ,通过 以 上 算法 得 到 的 基 路 径 是 以 程序 图 为 基础 的 ,并 没有 将 程序 图 和 其 对 
应 的 业务 逻辑 进行 关联 。 实 际 上 很 多 时 候 得 到 了 基 路 径 之 后 会 发 现 基 路 径 中 有 些 路 径 不 符合 
业务 逻辑 ,也 就 是 说 将 这 些 路 径 和 业务 逻辑 进行 关联 的 时 候 , 这 些 路 径 是 不 可 能 执行 的 。 在 这 
种 情况 下 ,有 两 种 不 同 的 处 理 方法 : 

(1) 找到 和 业务 逻辑 进行 关联 不 可 行 的 路 径 ,在 这 个 路 径 中 找到 出 度 大 于 或 等 于 2 的 节 
点 按照 以 上 加 进行 旋转 得 到 另外 的 路 径 , 直 到 得 到 的 这 个 路 径 符合 业务 逻辑 为 止 。 

(2) 找到 和 业务 逻辑 进行 关联 不 可 行 的 路 径 , 通 过 人 工 干 预 得 到 一 条 符合 业务 逻辑 的 
路 径 。 

2) 基 路 径 测试 的 实际 应 用 

首先 总 结 基 路 径 测试 法 的 步骤 : 

(1) 以 详细 设计 或 源 代码 作为 基础 ,导出 程序 图 。 


(2) 计算 得 到 程序 图 的 独立 路 径 数 或 环 路 复杂 性 Ve 。 

(3) 根据 程序 图 分 析出 一 条 合理 的 基线 路 径 。 

(4) 依据 算法 得 到 除 基 线路 径 以 外 的 其 他 独立 路 径 ,并 使 总 路 径 数 满足 Ve , 即 得 到 一 组 
基 路 径 。 

(5) 依据 这 组 基 路 径 设 计 对 应 的 测试 用 例 ,并 评审 。 

例子 一 : 

图 3-22 所 示 是 一 程序 图 ,将 根据 基 路 径 算法 得 出 一 组 基 路 径 。 

首先 ,依据 Ve 二 e 一 n 十 2=10 一 7 十 2 二 5, 基 路 径 中 应 该 包含 5 
条 独立 的 路 径 。 根 据 必须 确定 一 条 基线 路 径 的 原则 ,依据 基 路 径 
的 算法 选择 基线 路 径 A 一 BC 一 BE 一 F 一 G。 这 条 基线 路 径 中 
的 第 一 个 节点 A 就 是 出 度 等 于 2 的 节点 。 以 节点 A 为 轴 进 行 旋 
转 , 以 DD 来 替换 A, 基 线路 径 中 的 其 他 节点 尽量 多 的 保留 ,这 样 得 
到 了 第 二 条 路 径 A 一 DE 一 FG。 再 以 基线 路 径 中 的 节点 BB 为 
轴 旋 转 , 用 节点 下来 替换 节点 C, 同 样 ,基线 路 径 中 的 其 他 节点 尽 
量 多 地 保留 ,这 样 得 到 第 三 条 路 径 A 一 B 一 E 一 F 一 G。 再 搜索 基线 
路 径 发 现 第 三 个 节点 C 也 是 出 度 等 于 2 的 节点 ,以 C 节点 为 轴 旋 
转 , 用 G 来 替换 B, 得 到 第 四 条 路 径 和 一 BC 一 G。 再 往 后 搜索 基 
线路 径 发 现 节点 也 已 经 被 旋转 过 ,继续 往 后 搜索 找 不 到 没有 旋转 
过 的 出 度 大 于 或 等 于 2 的 节点 了 ,这 时 ,可 以 在 刚才 旋转 得 到 的 其 他 路 径 中 找 出 度 大 于 或 等 于 
2 的 节点 ,这 里 可 以 在 第 二 条 路 径 A 一 DE 一 F 一 G 中 搜索 ,发 现 节点 DD 没 被 旋转 过 ,同时 该 
节点 的 出 度 为 2, 以 DD 为 轴 进 行 旋转 ,用 节点 下 替换 节点 下 ,得 到 路 径 A 一 DF 一 G。 这 样 就 
得 到 了 5 条 路 径 , 这 5 条 路 径 是 独立 的 ,构成 了 图 3-22 所 示 程 序 图 的 一 组 基 路 径 : 

» A>B>C>B>E>F—>G; 

» A>D>E>F>G; 

» A>B>E>F>G; 

» A>B>C™>G; 

» A>D>E>F—>G, 

最 后 ,结合 程序 图 所 对 应 的 业务 逻辑 ,根据 这 5 条 路 径 设 计 出 测试 用 例 。 由 于 图 3-21 所 
示 的 程序 图 没有 和 具体 的 业务 绑 定 ,这 里 不 再 考虑 。 

例子 二 ， 

下 面 以 一 个 求 平均 值 的 过 程 averagy 为 例 , 说 明基 路 径 法 设计 测试 用 例 的 过 程 。 用 伪 代 
码 语言 描述 的 averagy 过 程 如 下 所 示 。 


图 3-22 程序 图 


PROCEDURE averagy; 
x* This procedure computes the average of 100 or fewer numbers that lie bounding values; it also 
computes the total input and the total valid. 
INTERFACE RETURNS averagy, total. input,total. valid; 
INTERFACE ACCEPTS value, minimum, maximum; 
TYPE value[ 1:100]IS SCALAR ARRAY; 
TYPE averagy, total. input, total. valid, minimum, maximum, sum IS SCALAR; 
TYPE i IS INTEGER; 
i=1; 
total. input = total. valid= 0; 


sum= 0; 
DO WHILE value[ i]<>— 999 AND total. input< 100 
increment total. input by 1; 
IE value[i]> = minimum AND value[ i]<= maximum 
THEN increment total.valid by 1; 
sum= sum+ value[i]; 
ELSE skip; 
ENDIF; 
increment i by 1; 
ENDDO 
IF total.valid>0 
THEN averagy = sum/total. valid; 
ELSE averagy = — 999; 
ENDIF 
END avergy 


以 详细 设计 或 源 代码 作为 基础 ,导出 程序 的 程序 图 。 
依据 前 面 程序 图 的 分 析 描 述 标识 出 1 一 13 号 节点 如 图 3-23 所 示 , 并 结合 本 程序 画 出 程序 
图 ,如 图 3-24 所 示 。 


| 

DO WHILE | value[i]<>-999 | AND | total.input<100 
4 [Cncrement total.input by 1; | 

5 6 

IF|_value[i]>=minimum | AND | value[i]<=maximum 


THEN increment total. Valid by 1; 
时 sum=sum+value[i] 

ELSE skip; 

ENDIF; 

8 
increment i by 1; 
9| ENDDO 
10 
IF|_total.valid>0 


11 | THEN averagy=sum/total.valid; 
12 [ELSE averagy=—999; 


13 [ENDIF 


3-23 ”程序 averagy 的 节点 定义 图 3-24 averagy 过 程 的 程序 图 


计算 程序 图 的 独立 路 径 数 或 环 路 复杂 性 Ve ,利用 在 前 面 给 出 的 计算 程序 图 的 独立 路 径 数 
或 环 路 复杂 性 的 方法 ,可 以 算出 ,Ve 二 =e 一 n 十 2 二 17 一 13 十 2 二 6。 再 根据 算法 确定 一 组 独立 的 
基 路 径 , 基 路 径 由 6 条 独立 的 路 径 组 成 。 针 对 图 3-24 所 示 averagy 过 程 的 程序 图 选择 一 条 基 
线路 径 

1 一 2 一 3 一 4 一 5 一 6 一 7 一 8 一 9 一 2 一 10 一 12 一 13。 再 根据 算法 得 到 如 下 5 条 路 径 : 

。 1 一 2-~10-~12-~13; 

» I>2*3s10 12 >]13s 


。 1 一 2 一 3 一 4 一-5- 一 8 一 9 一 2 一 10 一 12 一 13; 
。 1 一 2 一 3 一 4 一 5 一 6 一 8 一 9 一 2 一 10 一 12 一 13; 
。 1™>2>3>4>5>6>7>8>9>2—>10>11>13。 
这 6 条 路 径 构成 了 图 3-24 所 示 程 序 图 的 一 组 基 路 径 。 因 为 基 路 径 不 唯一 ,所 以 也 可 以 得 
到 如 下 一 组 可 能 的 基 路 径 : 
。 1™>2>10>11™>13; 
。 1>2>10>12—™>13; 
。 1>2>3>10>11™>13; 
| ->~2 一 3 一 4 一 5 一 8 一 9 一 2…1; 
» 1 一 2 一 3 一 4 一 5 一 6 一 8 一 9 一 2…; 
|] -~2 一 3 一 4 一 5 一 6 一 7 一 8 一 9 一 2…。 
上 面 的 最 后 三 条 路 径 后 面 的 省 略 号 表示 在 程序 图 中 以 后 剩 下 的 路 径 是 可 选择 的 。 程 序 图 
中 的 节点 2、3、5、6 和 10 都 是 判断 节点 ,是 出 度 大 于 或 等 于 2 的 节点 ,这 些 节 点 通常 是 旋转 
节点 。 
最 后 再 生成 测试 用 例 ,确保 基 路 径 中 每 条 路 径 的 执行 。 满 足 上 述 第 二 组 基本 路 径 集 的 测 
试用 例如 下 所 示 。 
路 径 1: 输入 数据 : value[k] 二 有效 输入 ,限于 k<iGi 定义 如 下 )， 
value[i]== 一 999, 当 2<<i<100 
预期 结果 : n 个 值 的 正确 的 平均 值 正确 的 总 计数 。 
注意 : 不 能 孤立 地 进行 测试 ,应 当 作为 路 径 4、5.6 测试 的 一 部 分 来 测试 。 
路 径 2: 输入 数据 : value[1] 王 一 999 
预期 结果 : 平均 值 三 一 999 .总 计数 取 初始 值 。 
路 径 3: 输入 数据 : 试图 处 理 101 个 或 更 多 的 值 ,而 前 100 个 应 当 是 有 效 的 值 。 
预期 结果 : 与 测试 用 例 1 相同 。 
路 径 4: 输入 数据 : value[ 口 = 有 效 输入 , 且 i 二 100; value[k] 二 最 小 值 , 当 k 过 i 时 
预期 结果 : n 个 值 的 正确 的 平均 值 、 正 确 的 总 计数 。 
路 径 5: 输入 数据 : value[ 让 二 有效 输入 , 且 i 二 100; value[k] 二 最 大 值 , 当 ki 时 
预期 结果 : n 个 值 正确 的 平均 值 正 确 的 总 计数 。 
路 径 6: 输入 数据 : value[ 训 二 有 效 输入 , 且 i 二 100。 
预期 结果 : n 个 值 正确 的 平均 值 正 确 的 总 计数 。 
测试 用 例 执 行 之 后 ,与 预期 结果 进行 比较 。 如 果 所 有 测试 用 例 都 执行 完毕 , 则 可 以 确信 程 
序 中 所 有 的 可 执行 语句 至 少 被 执行 了 一 次 ,达到 了 基 路 径 覆 盖 , 即 达到 McCabe 覆盖 。 
7. 最 少 测试 用 例 数 计算 
为 实现 测试 的 逻辑 覆盖 ,必须 设计 足够 多 的 测试 用 例 ,并 使 用 这 些 测试 用 例 执行 被 测 程 
序 , 实 施 测 试 。 我 们 关心 的 是 ,对 某 个 具体 程序 来 说 ,至 少 要 设计 多 少 测试 用 例 。 这 里 提供 一 
种 估算 最 少 测试 用 例 数 的 方法 。 结 构 化 程序 由 如 下 三 种 基本 控制 结构 组 成 : 
。 顺序 型 : 构成 串 行 操作 。 
。 选择 型 : 构成 分 支 操作 。 
。 重复 型 : 构成 循环 操作 。 
为 了 把 问题 化 简 , 避 免 出 现 测试 用 例 极 多 的 组 合 爆炸 ,把 构成 循环 操作 的 重复 型 结构 用 选 


择 结构 代替 。 也 就 是 说 ,并 不 指望 测试 循环 体 所 有 的 重复 执行 ,而 只 对 循环 体检 验 一 次 。 这 
样 , 任 一 循环 便 改造 成 进入 循环 体 或 不 进入 循环 体 的 分 支 操作 了 。 图 3-25 给 出 了 类 似 于 流程 
图 的 N-S 图 表示 的 基本 控制 结构 中 A、B、C、D.S 均 表示 要 执行 的 操作 ,P 是 可 取 真 假 值 的 谓 
词 ,Y 表示 真 值 ,N 表示 假 值 ) 。 其 中 图 3-25(c) 和 图 3-25(d) 所 示 两 种 重复 型 结构 代表 了 两 种 
循环 。 在 作 了 如 上 简化 循环 的 假设 以 后 ,对 于 一 般 的 程序 控制 流 , 只 考虑 选择 型 结构 。 事 实 上 


它 已 能 体现 顺序 型 和 重复 型 结构 了 。 


例如 ,图 3-26 表达 了 两 个 顺序 执行 的 分 支 结构 。 两 个 分 支 谓词 P1 和 P2 取 不 同 值 时 ,将 
分 别 执行 4 或 b 及 c 或 d 操 作 。 显 然 , 要 测试 这 个 小 程序 ,需要 至 少 提供 4 个 测试 用 例 才能 做 
到 好 辑 覆 盖 , 使 得 ac ad,\bc 及 bd 操作 均 得 到 检验 。 其 实 , 这 里 的 4 个 用 例 是 图 中 第 一 个 分 支 
谓词 引出 的 两 个 操作 和 第 二 个 分 支 谓词 引出 的 两 个 操作 组 合 起 来 而 得 到 的 , 即 2X2 二 4。 这 


里 的 2 是 由 于 两 个 并 列 的 操作 1 十 1 二 2 而 得 到 的 。 


p 
A Y N pl 
Y N 
B C D 
(顺序 型 (b) 选择 型 8 ? 
当 P 
S y ee 
S | 
直到 P 
(co) DO WHILE 型 〈d) DO UNTIL 型 
图 3-25 N-S 图 表示 的 基本 控制 结构 图 3-26 ”两 个 串 行 的 分 支 结构 的 N-S 图 


对 于 一 般 的 ,更 为 复杂 的 问题 ,估算 最 少 测试 用 例 数 的 原则 也 是 同样 的 。 现 以 图 3-27 表 
示 的 程序 为 例 。 该 程序 中 共有 9 个 分 支 谓词 ,尽管 这 些 分 支 结构 交错 起 来 似乎 十 分 复杂 ,很 难 
一 眼看 出 应 至 少 需 要 多 少 个 测试 用 例 , 但 如 果 仍 用 上 面 的 方法 ,也 是 很 容易 解决 的 。 注 意 到 


图 3-27 可 分 为 上 下 两 层 : 分 支 谓词 1 的 操作 域 是 上 
层 ,分支 谓词 8 的 操作 域 是 下 层 。 这 两 层 正 像 前 面 
简单 例 中 的 Pl 和 P2 的 关系 一 样 。 只 要 分 别 得 到 两 
层 的 测试 用 例 个 数 , 再 将 其 相 乘 即 得 总 的 测试 用 例 
数 。 这 里 需要 首先 考虑 较为 复杂 的 上 层 结构 。 谓 词 
1 不 满足 时 要 做 的 操作 又 可 进一步 分 解 为 两 层 , 这 
就 是 图 3-28 中 的 D 和 四 部分。 它们 所 需 测 试用 例 个 
数 分 别 为 1 十 1 十 1 十 1 十 1=5 及 1 十 1 十 1 二 3。 因 而 两 
层 组 合 , 得 到 5x3 二 15。 于 是 整个 程序 结构 上 层 所 需 
测试 用 例 数 为 1 十 15 二 16, 而 下 层 十 分 显然 为 3。 故 
最 后 得 到 整个 程序 所 需 测试 用 例 数 至 少 为 16 X 
$=48, 

8. 测试 覆盖 准则 

(1) FOSTER 的 ESTCA 覆盖 准则 。 

前 面 介绍 的 逻辑 覆盖 ,其 出 发 点 似乎 是 合理 的 。 


< 


图 3-27 计算 最 少 测试 用 例 数 实例 


所 谓 * 覆 盖 ? 就 是 想 要 做 到 测试 全 面 ,而 无 遗漏 。 但 事实 表明 , 它 并 不 能 真 的 做 到 无 遗漏 。 甚 至 
像 前 面 提 到 的 将 程序 段 : 
SS 


IFE(I 0) Y 3 
THENI = J 5 下 


错 写成 : 

IF(I > 0) 

THENI = J 
这 样 的 小 问题 都 无 能 为 力 。 

分 析出 现 这 一 情况 的 原因 在 于 错误 区 域 仅 
仅 在 工 = 0 这 个 点 上 , 即 仅 当 I 取 0 时 ,测试 才 
能 发 现 错误 。 它 的 确 是 在 我 们 力图 全 面 覆盖 来 
查找 错误 的 测试 "网 上 ? 钻 了 空子 ,并 且 恰 恰 在 
容易 发 生 问 题 的 条 件 判 断 那 里 未 被 发 现 。 面 对 
这 类 情况 ,应 该 从 中 吸取 的 教训 是 测试 工作 要 
有 重点 ,要 多 针对 容易 发 生 问题 的 地 方 设计 测 
试用 例 。K. A. Foster 从 测试 工作 实践 的 教训 
出 发 ,吸收 了 计算 机 硬件 的 测试 原理 ,提出 了 一 
种 经 验 型 的 测试 覆盖 准则 , 较 好 地 解决 了 上 述 16 
问题 。 

Foster 的 经 验 型 覆盖 准则 是 从 硬件 的 早期 ”x 
测试 方法 中 得 到 启发 的 。 我 们 知道 ,硬件 测试 
中 ,对 每 一 个 门 电路 的 输入 、 输 出 测试 都 是 有 额 
定 标准 的 。 通 常 , 电 路 中 一 个 门 的 错误 常常 是 48 
“输出 总 是 0”, 或 是 “输出 总 是 1”。 与 硬件 测试 
中 的 这 一 情况 类 似 , 常 常 要 重视 程序 中 谓词 的 
取 值 ,但 实际 上 它 可 能 比 硬件 测试 更 加 复杂 。Foster 通过 大 量 的 实验 确定 了 程序 中 谓词 最 容 
易 出 错 的 部 分 ,得 出 了 一 套 错误 敏感 测试 用 例 分 析 ESTCA (Error Sensitive Test Cases 
Analysis) 规 则 。 事 实 上 ,规则 十 分 简单 。 

规则 1: 对 于 A rel B(rel 可 以 是 二 ,二 和 二 ) 型 的 分 支 谓词 ,应 适当 地 选择 A 与 B 的 值 ,使 
得 测试 执行 到 该 分 支 语 句 时 ,A 二 B, A==B 和 AB 的 情况 分 别 出 现 一 次 。 

规则 2: 对 于 A rell CCrell 可 以 是 二 或 二 ,A 是 变量 ,C 是 常量 ) 型 的 分 支 谓词 , 当 rell 为 
去 时 ,应 适当 地 选择 A 的 值 ,使 A 二 C 一 M(M 是 距 C 最 小 的 容器 容许 正 数 ,车 A 和 C 均 为 整 
型 时 ,M = 1)。 同 样 , 当 rell 为 二 时 ,应 适当 地 选择 A, 使 A=C 十 M。 

规则 3: 对 外 部 输入 变量 赋值 ,使 其 在 每 一 测试 用 例 中 均 有 不 同 的 值 与 符号 ,并 与 同一 组 
测试 用 例 中 其 他 变量 的 值 与 符号 不 一 致 。 

显然 ,上 述 规则 1 是 为 了 检测 rel 的 错误 ,规则 2 是 为 了 检测 “ 差 一 "之 类 的 错误 (如 本 应 是 
“IF A 二 1”, 而 错 成 ”IF A 之 0”) ,而 规则 3 则 是 为 了 检测 程序 语句 中 的 错误 (如 应 引用 一 变量 ， 
而 错 成 引用 一 常量 )。 上 述 三 规则 并 不 是 完备 的 ,但 在 普通 程序 的 测试 中 确 是 有 效 的 。 原 因 在 
于 规则 本 身 针 对 程序 编写 人 员 容 易 发 生 的 错误 ,或 是 围绕 着 发 生 错误 的 频繁 区 域 ,从 而 提高 了 
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图 3-28 最少 测试 用 例 数 计算 


发 现 错误 的 命中 率 。 

根据 这 里 提供 的 规则 来 检验 上 述 小 程序 段 错误 。 应 用 规则 1, 对 它 测试 时 ,应 选择 I 的 值 
为 0, 使 I=0 的 情况 出 现 一 次 。 这 样 一 来 就 立即 找 出 了 隐藏 的 错误 。 当 然 ,ESTCA 规则 也 有 
很 多 缺陷 。 一 方面 是 有 时 不 容易 找到 输入 数据 ,使 得 规则 所 指 的 变量 值 满足 要 求 。 另 一 方面 
是 仍 有 很 多 缺陷 发 现 不 了 。 对 于 查找 错误 的 广度 问题 在 变异 测试 中 得 到 较 好 的 解决 。 

(2) Woodward 等 人 的 层次 LCSAJ 覆盖 准则 。 

Woodward 等 人 曾经 指出 结构 覆盖 的 一 些 准则 ,如 分 支 覆 盖 或 路 径 覆盖 ,都 不 足以 保证 测 
试 数据 的 有 效 性 。 为 此 ,他 们 提出 了 一 种 层次 LCSAJ 覆盖 准则 。LCSAJ (Linear Code 
Sequence and Jump) 的 意思 是 线性 代码 序列 与 跳 转 。 一 个 LCSAJ 是 一 组 顺序 执行 的 代码 ,以 
控制 流 跳 转 为 其 结束 点 。 它 不 同 于 判断 一 判断 路 径 。 判 断 一 判断 路 径 是 根据 程序 有 向 图 决定 
的 。 一 个 判断 一 判断 路 径 是 指 两 个 判断 之 间 的 路 径 , 但 其 中 不 再 有 判断 。 程 序 的 入 口 .出口 和 
分 支 结 点 都 可 以 是 判断 点 。 而 LCSAJ 的 起 点 是 根据 程序 本 身 决定 的 。 它 的 起 点 是 程序 第 一 
行 或 转移 语 名 的 入 口 点 ,或 是 控制 流 可 以 跳 达 的 点 。 几 个 首尾 相 接 , 且 第 一 个 LCSAJ 起 点 为 
程序 起 点 ,最 后 一 个 LCSAJ 终点 为 程序 终点 的 LCSAJ 串 就 组 成 了 程序 的 一 条 路 径 。 一 条 程 
序 路 径 可 能 是 由 两 个 .三 个 或 多 个 LCSAJ 组 成 的 。 基 于 LCSAJ 与 路 径 的 这 一 关系 ， 
Woodward 提出 了 LCSAJ 覆盖 准则 。 这 是 一 个 分 层 的 覆盖 准则 : 

第 一 层 : 语句 覆盖 。 

第 二 层 : 分 支 柳 盖 。 

第 三 层 : LCSAJ 覆盖 。 即 程序 中 的 每 一 个 LCSAJ 都 至 少 在 测试 中 经 历 过 一 次 。 

第 四 层 : 两 两 LCSAJ 覆盖 。 即 程序 中 每 两 个 首尾 相连 的 LCSAJ 组 合 起 来 在 测试 中 都 要 
经 历 一 次 。 

第 nn 十 2 层 : 每 nn 个 首尾 相连 的 LCSAJ 组 合 在 测试 中 都 要 经 历 一 次 。 

它们 说 明了 越 是 高 层 的 覆盖 准则 越 难 满足 。 在 实施 测试 时 , 若 要 实现 上 述 的 Woodward 
层次 LCSAJ 覆盖 ,需要 产生 被 测 程序 的 所 有 LCSAJ。 


3.2.4 程序 插 装 


程序 插 装 (Program Instrumentation) 是 一 种 基本 的 测试 手段 ,在 软件 测试 中 有 着 广泛 的 
应 用 。 
1. 方法 概述 
程序 插 装 方法 简单 地 说 是 借助 往 被 测 程序 中 插入 操作 来 实现 测试 目的 的 方法 。 程 序 插 装 
的 基本 原理 是 在 不 破坏 被 测试 程序 原 有 逻辑 完整 性 的 前 提 下 ,在 程序 的 相应 位 置 上 插入 一 些 
探 针 。 这 些 探 针 本 质 上 就 是 进行 信息 采集 的 代码 段 ,可 以 是 赋值 语句 或 采集 覆盖 信息 的 函数 
调用 。 通 过 探 针 的 执行 并 输出 程序 的 运行 特征 数据 。 基 于 对 这 些 特 征 数据 的 分 析 ,揭示 程序 
的 内 部 行为 和 特征 。 例 如 ,在 调试 程序 时 ,常常 要 在 程序 中 插入 一 些 打印 语句 。 其 目的 在 于 希 
望 执行 程序 时 打印 出 我 们 最 为 关心 的 信息 。 进 一 步 通 过 这 些 信息 了 解 执行 过 程 中 程序 的 一 些 
动态 特性 。 比 如 ,程序 的 实际 执行 路 径 , 或 是 特定 变量 在 特定 时 刻 的 取 值 。 从 这 一 思想 发 展 出 
的 程序 插 装 技术 能 够 按 用 户 的 要 求 获取 程序 的 各 种 信息 ,成 为 测试 工作 的 有 效 手 段 。 

如 果 想 要 了 解 一 个 程序 在 某 次 运行 中 所 有 可 执行 语句 被 覆盖 (或 称 被 遍历 ) 的 情况 ,或 是 
每 个 语句 的 实际 执行 次 数 ,最 好 的 办 法 是 利用 插 装 技术 。 这 里 仅 以 计算 整数 X 和 整数 Y 的 最 


大 公约 数 程序 为 例 , 说 明 插 装 方法 的 要 点 。 图 3-29 给 出 了 这 一 程序 的 流程 图 。 图 中 虚线 框 并 
不 是 原来 程序 的 内 容 , 而 是 为 了 记录 语句 执行 次 数 而 插入 的 。 这 些 虚线 框 要 完成 的 操作 都 是 
计数 语句 ,其 形式 为 ， 

CCD 一 CGD 十 1 i=1,2,°…,6 

程序 从 入 口 开始 执行 ,到 出 口 结束 。 凡 经 历 的 计数 语句 都 能 记录 下 该 程序 点 的 执行 次 数 。 
如 果 在 程序 的 入 口 处 还 插入 了 对 计数 器 C(i) 初 始 化 的 语句 ,在 出 口 处 插入 了 打印 这 些 计数 器 
的 语句 ,就 构成 了 完整 的 插 装 程序 。 它 便 能 记录 并 输出 在 各 程序 点 上 语句 的 实际 执行 次 数 。 
图 3-30 所 示 为 插 装 后 的 程序 ,图 中 第 头 所 指 均 为 插入 的 语句 ( 原 程序 的 语句 已 略 去 )。 通 过 插 
入 的 语句 获取 程序 执行 中 的 动态 信息 ,这 一 做 法 正如 在 刚 研 制 成 的 机 器 特定 部 位 安装 记录 仪 
表 。 安 装 好 以 后 开动 机 器 试 运行 ,除了 可 以 从 机 器 加 工 的 成 品 检验 得 知 机 器 的 运行 特性 外 ,还 
可 通过 记录 仪表 了 解 其 动态 特性 。 这 就 相当 于 在 运行 程序 以 后 ,一 方面 可 检验 测试 的 结果 数 
据 , 另 一 方面 还 可 借助 插入 语句 给 出 的 信息 了 解 程序 的 执行 特性 。 正 是 这 个 原因 ,有 时 把 插入 
的 语句 称 为 “探测 器 ”, 借 以 实现 “探查 ”或 “监控 ”的 功能 。 


cc 1 
Q=X 
R=Y 
CO)=COJrH 
到 一 > F 
1CCD=CCOHH 1CG)CG)H1! 
= 初始 化 CG) 
T 一 CR 一 F 出 口 
! TcGjFcGhH 1 [cgrctOr 1 = “ee 
i i i 一 一 | CC)=CC)+l 
Q=Q-R R=R-Q 一 一 C(n)=C(n)+1 
| 打印 CG) 
图 3-29 插 装 后 求 最 大 公约 数 的 程序 流程 图 图 3-30” 插 装 程序 中 插入 的 语句 


在 程序 的 特定 部 位 插入 记录 动态 特性 的 语句 ,最 终 是 为 了 把 程序 执行 过 程 中 发 生 的 一 些 
重要 历史 事件 记录 下 来 。 例 如 ,记录 在 程序 执行 过 程 中 某 些 变量 值 的 变化 情况 ,变化 的 范围 
等 。 又 如 本 章 中 所 讨论 的 程序 逻辑 覆盖 情况 ,也 只 有 通过 程序 的 插 装 才能 取得 覆盖 信息 。 实 
践 表明 ,程序 插 装 方法 是 应 用 很 广 的 技术 ,特别 是 在 完成 程序 的 测试 和 调试 时 非常 有 效 。 

设计 程序 插 装 程序 时 需要 考虑 的 问题 包括 : 

(1) 探测 哪些 信息 ; 

(2) 在 程序 的 什么 部 位 设置 探测 点 


(3) 需要 设置 多 少 个 探测 点 。 

其 中 前 两 个 问题 需要 结合 具体 情况 解决 ,并 不 能 给 出 笼统 的 回答 。 至 于 第 三 个 问题 ,需要 
考虑 如 何 设置 最 少 探测 点 的 方案 。 例 如 ,图 3-29 中 程序 人 口 处 , 若 要 记录 语句 Q=X 和 有 R 王 Y 
的 执行 次 数 ,只 需 插 入 CCG1)=C(1) 十 1 这 样 一 个 计数 语句 就 够 了 ,没有 必要 在 每 个 语句 之 后 
都 插入 一 个 计数 语句 。 在 一 般 情况 下 ,可 以 认为 在 没有 分 支 的 程序 段 中 只 需 一 个 计数 语句 。 
但 程序 中 由 于 出 现 多 种 控制 结构 ,使 得 整个 结构 十 分 复杂 。 为 了 在 程序 中 设计 最 少 的 计数 语 
名 ,需要 针对 程序 的 控制 结构 进行 具体 的 分 析 。 这 里 列举 应 在 哪些 部 位 设置 计数 语句 : 
程序 块 的 第 一 个 可 执行 语句 之 前 ; 

。 DO、DO WHILE.DO UNTIL 及 DO 终端 语句 之 后 ; 
。 IF、ELSE IF、ELSE 语句 之 后 ; 

输入 输出 语句 之 后 ; 

For 语句 的 开始 前 和 结束 之 后 。 

2. 断言 语句 

“断言 (Assertions)” 是 指 变 量 应 满足 的 条 件 , 例 如 I 二 10、A(6) 二 0 等。 在 所 测试 源 程序 
中 ,在 指定 位 置 按 一 定格 式 ,用 注释 语句 写 出 的 断言 叫做 断言 语句 。 在 程序 执行 时 ,对 照 断言 
语句 检查 事先 指定 的 断言 是 否 成 立 , 可 以 帮助 复杂 系统 的 检验 、 调 试 和 维护 。 

断言 分 为 局 部 性 断言 和 全 局 性 断言 两 类 。 局 部 性 断言 是 指 在 程序 的 某 一 位 置 上 ,例如 重 
要 的 循环 或 过 程 的 入 口 和 出 口 处 ,或 者 在 一 些 可 能 引起 异常 的 关键 算法 之 前 设置 的 断言 语句 。 
例如 在 赋值 语句 A 一 B/Z 之 前 ,设置 局 部 性 断言 语句 


C ASSERT L()CRL(Z<> 0) 


全 局 性 断言 是 指 在 程序 运行 过 程 中 自始至终 都 适用 的 断言 。 例 如 ,变量 I、J、K 只 能 取 
0 一 100 之 间 的 值 ,变量 M\N 只 能 取 2、4、6、8 这 4 个 值 等。 全 局 性 断言 写 在 程序 的 说 明 部 分 。 
描述 格式 为 ; 

C ASSERT VALUES( 1, J, K) (0: 100) 

C ASSERT VALUES(M, N) (2, 4,6, 8) 

程序 员 在 每 个 变量 .数组 的 说 明之 后 都 可 写 上 反映 其 全 局 特性 的 断言 。 动 态 断 言 处理 程 
序 的 工作 过 程 如 下 ， 

(1) 动态 断言 处 理 程序 对 语言 源 程序 做 预 处 理 ,为 注释 语句 中 的 每 一 个 断言 插入 一 段 相 
应 的 检验 程序 。 

(2) 运行 经 过 预 处 理 的 程序 ,检验 程序 将 检查 程序 的 实际 运行 结果 与 断言 所 规定 的 逻辑 
状态 是 否 一 致 。 对 于 局 部 性 断言 ,每 当 程 序 执行 到 这 个 位 置 时 ,相应 的 检验 程序 就 要 工作 ; 对 
于 全 局 性 断言 ,在 每 次 变量 被 赋值 后 .相应 的 检验 程序 就 进行 工作 。 动 态 断 言 处 理 程序 还 要 统 
计 检 验 的 结果 ( 即 断 言 成 立 或 不 成 立 的 次 数 ) .在 发 现 断 言 不 成 立 的 时 候 , 还 要 记录 当时 的 现场 
信息 ,如 有 关 变 量 的 状态 等 。 处 理 程序 还 可 按 测试 人 员 的 要 求 , 在 某 个 断言 不 成 立 的 次 数 已 达 
指定 值 时 中 止 程序 的 运行 ,并 输出 统计 报告 。 

(3) 一 组 测试 结束 后 ,程序 输出 统计 结果 现场 信息 , 供 测试 人 员 分 析 。 

下 面 介 绍 JUnit 中 提供 的 一 些 断言 。JUnit 为 我 们 提供 了 一 些 辅助 函数 ,用 来 帮助 我 们 确 
定 被 测试 的 方法 是 否 按 照 预 期 的 效果 正常 工作 ,通常 把 这 些 辅 助 函 数 称 为 断言 。 下 面 来 介绍 
一 下 JUnit 的 断言 。 


© assertEquals。 

函数 原型 1: assertEquals([String message],expected,actual) 。 

参数 说 明 : message 是 一 个 可 选 的 消息 ,如 果 提 供 , 将 会 在 发 生 错误 时 报告 这 个 消息 。 
expected 是 期 望 值 ,通常 都 是 用 户 指定 的 内 容 。actual 是 被 测试 的 代码 返回 的 实际 值 。 

函数 原型 2: assertEquals([String message],expected,actual,tolerance) 。 

参数 说 明 : message 是 一 个 可 选 的 消息 ,如 果 提 供 , 将 会 在 发 生 错 误 时 报告 这 个 消息 。 
expected 是 期 望 值 , 通 常 都 是 用 户 指定 的 内 容 。actual 是 被 测试 的 代码 返回 的 实际 值 。 
tolerance 是 误差 参数 ,参加 比较 的 两 个 浮 点 数 在 这 个 误差 之 内 则 会 被 认为 是 相等 的 。 

@ assertTrue。 

函数 原型 . assertTrue ([String message],Boolean condition ) 。 

参数 说 明 : message 是 一 个 可 选 的 消息 ,如 果 提 供 , 将 会 在 发 生 错 误 时 报告 这 个 消息 。 
condition 是 待 验证 的 布尔 型 值 。 该 断言 用 来 验证 给 定 的 布尔 型 值 是 否 为 真 ,如 果 结 果 为 假 ， 
则 验证 失败 。 当 然 , 还 有 验证 为 假 的 测试 条 件 : 函数 原型 为 assertFalse([String message]， 
Boolean condition) ,该 断言 用 来 验证 给 定 的 布尔 型 值 是 否 为 假 , 如 果 结 果 为 真 , 则 验证 失败 。 

@ assertNull。 

函数 原型 . assertNull([String message],Object object) 。 

参数 说 明 : message 是 一 个 可 选 的 消息 ,如 果 提 供 , 将 会 在 发 生 错误 时 报告 这 个 消息 。 
object 是 待 验证 的 对 象 。 该 断言 用 来 验证 给 定 的 对 象 是 否 为 null, 如 果 不 为 null, 则 验证 失 
败 。 相 应 地 ,还 存在 可 以 验证 非 null 的 断言 : 函数 原型 为 assertNotNull([ String messagej]， 
Object object) ,该 断言 用 来 验证 给 定 的 对 象 是 否 为 非 null, 如 果 为 null, 则 验证 失败 。 

@ assertSame。 

函数 原型 : assertSame ([String message],expected,actual) 。 

参数 说 明 : message 是 一 个 可 选 的 消息 ,如 果 提 供 , 将 会 在 发 生 错误 时 报告 这 个 消息 。 
expected 是 期 望 值 。actual 是 被 测试 的 代码 返回 的 实际 值 。 该 断言 用 来 验证 expected 参数 和 
actual 参数 所 引用 的 是 否 是 同一 个 对 象 ,如 果 不 是 , 则 验证 失败 。 相 应 地 ,也 存在 验证 不 是 同 
一 个 对 象 的 断言 : 函数 原型 为 assertNotSame ([String message],expected,actual) ,该 断言 用 
来 验证 expected 参数 和 actual 参数 所 引用 的 是 否 是 不 同 对 象 . 如 果 所 引用 的 对 象 相 同 , 则 验 
证 失败 。 

©® Fail。 

函数 原型 : Fail([String message]) 。 

参数 说 明 : message 是 一 个 可 选 的 消息 ,如 果 提 供 , 将 会 在 发 生 错 误 时 报告 这 个 消息 。 该 
断言 会 使 测试 立即 失败 ,通常 用 在 测试 不 能 达到 的 分 支 上 (如 异常 )。 

从 JUnit4.4 开始 引入 了 Hamcrest 框架 ,Hamcest 提供 了 一 套 匹 配 符 Matcher, 这 些 匹 配 
符 更 接近 自然 语言 ,可 读 性 高 ,更 加 灵活 。 也 使 用 全 新 的 断言 语法 assertThat, 结 合 Hamcest 
提供 的 匹配 符 ,只 用 这 一 个 方法 就 可 以 实现 所 有 的 测试 。assertThat 语法 如 下 : 

assertThat(T actual, Matcher <T> matcher); 

assertThat (String reason, T actual, Matcher <T> matcher); 

其 中 actual 为 需要 测试 的 变量 ,matcher 为 使 用 Hamcrest 的 匹配 符 来 表达 变量 actual 期 
望 值 的 声明 。 必 须 注意 的 是 ,必须 导入 JUnit4. 4 之 后 的 版 本 才能 使 用 assertThat 方法 ; 不 需 


要 继承 TestCase 类 ,但 是 需要 测试 方法 前 加 @Test。 下 面 是 一 个 例子 。 


TTest. java: 


01. package cn.edu.ahau.mgc.junit4. test; 
02. 

03. import java.util.List; 

04. import java.util.Map; 

05. 

06. import org. junit. Test; 

07. import static org. junit.Assert. *; 

08. import cn.edu.ahau.mgc. junit4.T; 

09. import static org.hamcrest.Matchers. *; 


10. 

11. public class TTest { 

12, 

13. @Test 

14. public void testAdd() { 

15. 

16. // 一 般 匹 配 符 

13 int s= new T().add(1, 1); 

18. //all0f: 所 有 条 件 必须 都 成 立 ,测试 才 通 过 

19. assertThat(s, allOf(greaterThan( 1 ), lessThan( 3 ))); 
20. //anyof : 只 要 有 一 个 条 件 成 立 ,测试 就 通过 

21, assertThat(s, anyOf(greaterThan( 1 ), lessThan( 1 ))); 
22. //anything: 无 论 什 么 条 件 ,测试 都 通过 

23, assertThat(s, anything()); 

24. //is: 变量 的 值 等 于 指定 值 时 , 测试 通过 

25. assertThat(s, is( 2 )); 

26. //not: 和 is 相反 ,变量 的 值 不 等 于 指定 值 时 ,测试 通过 
2 assertThat(s, not( 1 )); 

28. 

29. // 数 值 匹配 符 

30. double d= new T().div( 10, 3); 

31, //closeTo: 浮 点 型 变量 的 值 在 3.0+0.5 范围 内 ,测试 通过 
3 assertThat(d, closeTo( 3.0, 0.5 )); 

33. //greaterThan: 变量 的 值 大 于 指定 值 时 ,测试 通过 

34. assertThat(d, greaterThan( 3.0 )); 

35; //lessThan: 变量 的 值 小 于 指定 值 时 ,测试 通过 

36. assertThat(d, lessThan( 3.5 )); 

J //greaterThanOrEuqalTo: 变量 的 值 大 于 等 于 指定 值 时 ,测试 通过 
38. assertThat(d, greaterThanOrEqualTo( 3.3 )); 

39. //lessThanOrEqualTo: 变量 的 值 小 于 等 于 指定 值 时 ,测试 通过 
40. assertThat(d, lessThanOrEqualTo( 3.4 )); 

41. 

42. // 字 符 串 匹配 符 

43. Stringn = new T().getName( "Magci" ); 

44. //containsString: 字符 串 变 量 中 包含 指定 字符 串 时 ,测试 通过 
45. assertThat(n, containsString( "ci" )); 

46. //startsWith: 字符 串 变 量 以 指定 字符 串 开 头 时 ,测试 通过 
47. assertThat(n, startsWith( "Ma" )); 

48. //endsWith: 字符 串 变 量 以 指定 字符 串 结尾 时 , 测试 通过 


49. assertThat(n, endsWith( "i" )); 


50. //euqalTo: 字符 串 变量 等 于 指定 字符 串 时 ,测试 通过 

51. assertThat(n, equalTo( "Magci" )); 

52. //equalToIgnoringCase: 字符 串 变 量 在 忽略 大 小 写 的 情况 下 等 于 指定 字符 串 时 , 测试 
通过 

53, assertThat(n, equalToIgnoringCase( "magci" )); 

54. //equalToIgnoringWhiteSpace: 字符 串 变量 在 忽略 头 尾 任意 空格 的 情况 下 等 于 指定 字符 
串 时 ,测试 通过 

55. assertThat(n，equalToIgnoringWhiteSpace( " Magci " )); 

56. 

57, // 集 合 匹 配 符 

58. List< String> 1 = new T().getList( "Magci" ); 

59. //hasItem: Iterable 变量 中 含有 指定 元 素 时 ,测试 通过 

60. assertThat(1，hasItem( "Magci" )); 

Gs 

62. Map<String, String> m = new T().getMap( "mgc", "Magci" ); 

63. //hasEntry: Map 变量 中 含有 指定 键 值 对 时 ,测试 通过 

64. assertThat(m, hasEntry( "mgc" , "Magci" )); 

65. //hasKey: Map 变量 中 含有 指定 键 时 ,测试 通过 

66. assertThat(m, hasKey( "mgc" )); 

67. //hasValue: Map 变量 中 含有 指定 值 时 , 测试 通过 

68. assertThat(m, hasValue( "Magci" )); 

69. } 

70. 
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3.2.5 其 他 白 盒 测试 方法 简介 
1. 域 测试 


域 测试 (Domain Testing) 是 一 种 基于 程序 结构 的 测试 方法 。Howden 曾 对 程序 中 出 现 的 
错误 进行 分 类 ,他 把 程序 错误 分 为 域 错误 .计算 型 错误 和 丢失 路 径 错误 三 种 。 这 是 相对 于 执行 
程序 的 路 径 来 说 的 。 我 们 知道 ,每 条 执行 路 径 对 应 于 输入 域 的 一 类 情况 ,是 程序 的 一 个 子 计 
算 。 如 果 程 序 的 控制 流 有 错误 ,对 于 某 一 特定 的 输入 可 能 执行 的 是 一 条 错误 路 径 , 这 种 错误 称 
为 路 径 错误 ,也 叫做 域 错误 ,如 果 对 于 特定 输入 执行 的 是 正确 路 径 ,但 由 于 赋值 语句 的 错误 致 
使 输出 结果 不 正确 , 则 称 此 为 计算 型 错误 。 另 一 类 错误 是 丢失 路 径 错误 , 它 是 由 于 程序 中 某 人 处 
少 了 一 个 判定 谓词 而 引起 的 。 域 测试 是 指 主要 针对 域 错误 进行 的 程序 测试 。 域 测试 的 “ 域 ”是 
指 程序 的 输入 空间 。 域 测试 方法 基于 对 输入 空间 的 分 析 。 当 然 ,任何 一 个 被 测 程序 都 有 一 个 
输入 空间 。 测 试 的 理想 结果 就 是 检验 输入 空间 中 的 每 一 个 输入 元 素 是 否 都 产生 正确 的 结果 。 
而 输入 空间 又 可 分 为 不 同 的 子 空间 ,每 一 子 空间 对 应 一 种 不 同 的 计算 。 在 考察 被 测试 程序 的 
结构 以 后 就 会 发 现 , 子 空 间 的 划分 是 由 程序 中 分 支 语句 中 的 谓词 决定 的 。 输 入 空间 的 一 个 元 
素 , 经 过 程序 中 某 些 特定 语句 的 执行 而 结束 (当然 也 可 能 出 现 无 限 循环 而 无 出 口 ) , 那 都 是 满足 
了 这 些 特定 语句 被 执行 所 要 求 的 条 件 的 。 域 测试 正 是 在 分 析 输 入 域 的 基础 上 选择 适当 的 测试 
点 以 后 进行 测试 的 。 域 测试 有 两 个 致命 的 弱点 : 一 是 为 进行 域 测试 对 程序 提出 的 限制 过 多 ; 
二 是 当 程 序 存 在 很 多 路 径 时 .所 需 的 测试 点 也 就 很 多 。 

2. 符号 测试 

符号 测试 的 基本 思想 是 允许 程序 的 输入 不 仅仅 是 具体 的 数值 数据 ,而 且 包 括 符 号 值 ,这 一 
方法 也 是 因此 而 得 名 。 这 里 所 说 的 符号 值 可 以 是 基本 符号 变量 值 ,也 可 以 是 这 些 符号 变量 值 


的 一 个 表达 式 。 这 样 , 在 执行 程序 过 程 中 以 符号 的 计算 代替 了 普通 测试 执行 中 对 测试 用 例 的 
数值 计算 ,所 得 到 的 结果 自然 是 符号 公式 或 是 符号 谓词 。 更 明确 地 说 ,普通 测试 执行 的 是 算术 
运算 ,符号 测试 则 是 执行 代数 运算 。 因 此 符号 测试 可 以 认为 是 普通 测试 的 一 个 自然 的 扩充 。 
符号 测试 可 以 看 作 是 程序 测试 和 程序 验证 的 一 个 折衷 方 法 。 一 方面 , 它 沿用 了 传统 的 程序 测 
试 方法 ,通过 运行 被 测 程序 来 验证 它 的 可 靠 性 。 另 一 方面 ,由 于 一 次 符号 测试 的 结果 代表 了 一 
大 类 普通 测试 的 运行 结果 ,实际 上 是 证 明了 程序 接受 此 类 输入 ,所 得 输出 是 正确 的 ,还 是 错误 
的 。 最 为 理想 的 情况 是 程序 中 仅 有 有 限 的 几 条 执行 路 径 。 如 果 对 这 有 限 的 几 条 路 径 都 完成 了 
符号 测试 ,就 能 较 有 把 握 地 确认 程序 的 正确 性 了 。 从 符号 测试 方法 使 用 来 看 ,问题 的 关键 在 于 
开发 出 比 传统 的 编译 器 功能 更 强 , 能 够 处 理 符号 运算 的 编译 器 和 解释 器 。 目 前 符号 测试 存在 
一 些 未 得 到 圆满 解决 的 问题 ,分别 是 : 

(1) 分 支 问题 。 

当 采 用 符号 执行 方法 进行 到 某 一 分 支点 处 ,分 支 谓 词 是 符号 表达 式 ,这 种 情况 下 通常 无 法 
决定 谓词 的 取 值 ,也 就 不 能 决定 分 支 的 走向 ,需要 测试 人 员 作 人 工 干 预 ,或 是 执行 树 的 方法 进 
行 下 去 。 如 果 程 序 中 有 循环 ,而 循环 次 数 又 决定 于 输入 变量 , 那 就 无 法 确定 循环 的 次 数 。 

(2) 二 义 性 问题 。 

数据 项 的 符号 值 可 能 是 有 二 义 性 的 。 这 种 情况 通常 出 现在 带 有 数组 的 程序 中 。 我 们 来 看 
下 面 的 程序 段 : 

X(I1)=2+A 

X(J) 3 

CeXI) 

如 果 I=J, 则 C=3, 否 则 C=2 十 A。 但 由 于 使 用 符号 值 运算 ,这 时 无 法 知道 1 是 否 等 于 ]。 

(3) 大 程序 问题 。 

符号 测试 中 总 是 要 处 理 符号 表达 式 。 随 着 符号 执行 的 继续 ,一 些 变量 的 符号 表达 式 会 越 
来 越 庞大 。 特 别 是 当 符号 执行 树 很 大 ,分 支点 很 多 ,路 径 条 件 本 身 变 成 一 个 非常 长 的 合 取 式 。 
如 果 能 够 有 办 法 将 其 化 简 , 自 然 会 带 来 很 大 好 处 。 但 如 果 找 不 到 化 简 的 办 法 , 那 将 给 符号 测试 
的 时 间 和 和 运行 空间 带 来 大 幅度 的 增长 ,甚至 使 整个 问题 的 解决 遇 到 难以 克服 的 困难 。 

3. Z 路 径 覆 盖 

分 析 程 序 中 的 路 径 是 指 检验 程序 从 入 口 开始 ,执行 过 程 中 经 历 的 各 个 语句 ,直到 出 口 。 这 
是 白 盒 测试 最 为 典型 的 问题 ,前 面 已 经 做 了 分 析 。 着 眼 于 路 径 分 析 的 测试 可 称 为 路 径 测 试 。 
完成 路 径 测试 的 理想 情况 是 做 到 路 径 柳 盖 。 对 于 比较 简单 的 小 程序 ,实现 路 径 获 盖 是 可 能 做 
到 的 。 但 是 如 果 程 序 中 出 现 多 个 判断 和 多 个 循环 ,可 能 的 路 径 数 目 将 会 急剧 增长 ,达到 天 文 数 
字 , 以 致 实现 路 径 覆 羡 不 可 能 做 到 。 为 了 解决 这 一 问题 ,前 面 讨论 了 基 路 径 测试 方法 。 这 里 将 
简单 讨论 另外 一 种 解决 该 问题 的 方法 ,思路 是 必须 舍 掉 一 些 次 要 因素 ,对 循环 机 制 进行 简化 ， 
从 而 极 大 地 减少 路 径 的 数量 ,使 得 覆盖 这 些 有 限 的 路 径 成 为 可 能 。 称 简化 循环 意义 下 的 路 径 
覆盖 为 Z 路 径 覆 盖 。 这 里 所 说 的 对 循环 化 简 是 指 限制 循环 的 次 数 。 无 论 循环 的 形式 和 实际 
执行 循环 体 的 次 数 多 少 , 只 考虑 循环 一 次 和 零 次 两 种 情况 , 即 只 考虑 执行 时 进入 循环 体 一 次 和 
跳 过 循环 体 这 两 种 情况 。 图 3-31(a) 和 (b) 表 示 了 两 种 最 典型 的 循环 控制 结构 。 前 者 先 作 判 
断 ,循环 体 B 可 能 执行 (假定 只 执行 一 次 ) ,也 可 能 不 执行 。 这 就 如 同 图 3-31(c) 所 表示 的 条 件 
选择 结构 一 样 。 后 者 先 执 行 循环 体 B( 假 定 也 执行 一 次 ) ,再 经 判断 转 出 ,其 效果 也 与 图 3-31(c) 中 
给 出 的 条 件 选择 结构 只 执行 右 支 的 效果 一 样 。 


人 


a 


(a) 循环 控制 结构 1 (b) 循环 控制 结构 2 (ce) 循环 控制 结构 3 
图 3-31 循环 结构 简化 成 选择 结构 


对 于 程序 中 的 所 有 路 径 可 以 用 路 径 树 来 表示 ,具体 表示 方法 本 文 略 。 当 得 到 某 一 程序 的 
路 径 树 后 ,从 其 根 结 点 开始 一 次 遍历 ,再 回 到 根 结 点 时 ,把 所 经 历 的 叶 结 点 名 排列 起 来 就 得 到 
一 个 路 径 。 如 果 设 法 遍历 了 所 有 的 叶 结 点 , 那 就 得 到 了 所 有 的 路 径 。 当 得 到 所 有 的 路 径 后 , 生 
成 每 个 路 径 的 测试 用 例 ,就 可 以 做 到 Z 路 径 覆 盖 测 试 。 

4. 程序 变异 

程序 变异 方法 与 前 面 提 到 的 结构 测试 和 功能 测试 都 不 一 样 , 它 是 一 种 错误 驱动 测试 。 所 
谓 错误 驱动 测试 方法 ,是 指 该 方法 是 针对 某 类 特定 程序 错误 的 。 经 过 多 年 的 测试 理论 研究 和 
软件 测试 的 实践 ,人 们 逐渐 发 现 要 想 找 出 程序 中 所 有 的 错误 几乎 是 不 可 能 的 。 比 较 现实 的 解 
决 办 法 是 将 错误 的 搜索 范围 尽 可 能 地 缩小 ,以 利于 专门 测试 某 类 错误 是 否 存在 。 这 样 做 的 好 
处 在 于 ,便于 将 目标 集中 于 对 软件 危害 最 大 的 错误 ,而 暂时 忽略 对 软件 危害 较 小 的 可 能 错误 。 
这 样 可 以 取得 较 高 的 测试 效率 ,并 降低 测试 的 成 本 。 错 误 驱 动 测试 主要 有 两 种 , 即 程序 强 变异 
和 程序 弱 变 异 。 为 便于 测试 人 员 使 用 变异 方法 ,一些 变异 测试 工具 被 开发 出 来 。 关 于 程序 变 
异 测试 方法 ,请 参见 其 他 资料 。 


3.2.6 白 盒 测试 方法 选择 的 策略 


在 白 盒 测试 中 ,使 用 各 种 测试 方法 的 综合 策略 参考 如 下 。 

(1) 在 测试 中 ,应 尽量 先 用 人 工 或 工具 进行 静态 结构 分 析 。 

(2) 测试 中 可 采取 先 静 态 后 动态 的 组 合 方式 : 先进 行 静态 结构 分 析 、 代 码 检查 并 进行 静 
态 质量 度量 ,再 进行 覆盖 率 测试 。 

(3) 利用 静态 分 析 的 结果 作为 引导 ,通过 代码 检查 和 动态 测试 的 方式 对 静态 分 析 结果 进 
行进 一 步 的 确认 ,使 测试 工作 更 为 有 效 。 

(4) 覆盖 率 测 试 是 白 盒 测试 的 重点 ,一 般 可 使 用 基 路 径 测试 法 达到 语句 覆盖 标准 。 对 于 
软件 的 重点 模块 ,应 使 用 多 种 覆盖 率 标 准 衡量 代码 的 覆盖 率 。 

(5) 在 不 同 的 测试 阶段 ,测试 的 侧重 点 不 同 : 在 单元 测试 阶段 ,以 代码 检查 、 迪 辑 覆 六 为 
主 ; 在 集成 测试 阶段 ,需要 增加 静态 结构 分 析 、 静 态 质 量度 量 ; 在 系统 测试 阶段 ,应 根据 黑 盒 
测试 的 结果 ,采取 相应 的 白 盒 测 试 。 


练习 


1. 在 万 年 历程 序 中 年 份 的 范围 是 2000 委 Y 委 2500 ,分 别 用 边界 值 分 析 法 .等 价 类 法 、 因 果 
图 法 及 决策 表 法 设计 测试 用 例 。 
2. 下 表 为 个 人 所 得 税 税率 的 计算 方法 列表 : 


金额 (RMB) 税率 及 说 明 
0 一 500 0% 
500~2000 超出 500 部 分 按照 5% 计 税 
2000 一 5000 10% 
5000~20 000 15% 
20000 以 上 20% 


理解 表 中 的 数据 ,分 别 用 边界 值 分 析 法 、 等 价 类 法 设计 测试 用 例 。 
3. 理解 一 个 宾馆 在 线 订 购 服务 系统 ,用 Use Case 法 设计 测试 用 例 。 
4. 理解 下 列 程序 结构 ,分 别 用 逮 辑 覆盖 法 和 基 路 径 覆盖 法 设计 测试 用 例 。 


# include < stdio.h> 
int partition(int * data, int low, int high) 
{ intt = 0; 
t = data[low]; 
while(low < high) 
{ while(low < high && data[high] >= t) 
high++; 
data[ low] = data[high]; 
while(low < high && data[ low] <= 七 ) 
lowt+; 
data[high] = data[ low]; 
} 
data[low] = t; 
return low; 


5. 举 一 个 例子 ,应 用 正 交 实验 法 设计 测试 用 例 。 


CHAPTER 4 
第 4 章 
单元 测试 


在 第 1 章 中 对 单元 测试 作 了 简单 描述 ,本章 将 对 单元 测试 作 详细 
分 析 。 


4.1 单元 测试 概述 


何 为 单元 测试 ?比如 ,设计 师 在 组 装 卫 星之 前 ,其 中 的 每 个 部 件 可 
能 是 硬件 的 元 件 , 也 可 能 是 软件 的 一 个 功能 ,对 这 些 部 件 所 进行 的 测试 
就 类 似 于 软件 开发 过 程 中 的 单元 测试 。 对 于 程序 员 来 说 ,单元 测试 是 每 
天 都 必 做 的 工作 ,也 称 为 自 测 试 。 再 如 ,完成 一 个 功能 函数 的 代码 后 , 需 
要 对 该 函数 进行 测试 ,看 看 它 所 实现 的 功能 是 否 正常 ,甚至 有 时 还 要 全 
面 地 测试 该 函数 所 有 可 能 的 输入 和 输出 。 当 然 ,这 种 单元 测试 属于 非 正 
规 的 临时 单元 测试 ,这 种 测试 可 能 存在 着 测试 的 不 完整 性 ,如 只 进行 了 
功能 测试 ,没有 进行 针对 代码 的 白 盒 测 试 , 一 些 关键 的 路 径 不 能 覆盖 , 代 
码 覆 盖 率 很 难 超过 80% 等 。 传 统 软件 对 “单元 ”一 词 有 不 同 的 定义 ,如 : 

。 单元 是 可 以 编译 和 执行 的 最 小 软件 组 件 。 

。 单元 是 决 不 会 指派 给 多 个 设计 人 员 开 发 的 软件 组 件 。 

实际 上 “单元 的 概念 和 被 测 软件 系 统 所 采用 的 分 析 和 设计 方法 ， 
以 及 在 其 开发 过 程 中 采用 的 实现 技术 有 关 。 基 本 单元 必须 具备 一 定 的 
基本 属性 ,有 明确 的 规格 定义 ,以 及 包含 与 其 他 部 分 接口 的 明确 定义 等 ， 
从 软件 工程 的 角度 来 说 ,具有 功能 的 独立 性 符合 高 内 聚 和 低 耦 合 的 特 
性 ,并 且 能 够 清晰 地 与 同一 程序 中 的 其 他 单元 划分 开 来 。 

对 于 结构 化 的 编程 语言 而 言 ,程序 单元 通常 是 指 程序 中 定义 的 函数 
或 子 程序 ,单元 测试 就 是 指 对 函数 或 子 程序 所 进行 的 测试 。 但 有 时 候 也 
可 以 把 紧密 相关 的 一 组 函数 或 过 程 看 成 一 个 单元 。 举 例 来 说 : 如 果 函 
数 A 只 调用 另 一 个 函数 B, 而 函数 B 不 被 其 他 函数 调用 , 且 函 数 B 和 范 
数 A 的 代码 总 处 于 一 定 的 范围 之 内 ,那么 在 执行 单元 测试 时 ,就 可 以 将 
A 和 BB 合并 为 一 个 单元 进行 测试 。 对 于 面向 对 象 的 编程 语言 而 言 , 程 
序 单元 通常 指 特定 的 一 个 具体 的 类 或 相关 的 多 个 类 ,单元 测试 主要 是 指 
对 类 的 测试 。 但 有 时 候 , 在 一 个 类 特别 复杂 时 ,就 会 把 方法 作为 一 个 单 
元 进行 测试 。 对 于 同 面向 对 象 软件 关联 密切 的 GUI 应 用 程序 而 言 , 单 


元 测试 一 般 是 在 “按钮 级 ”进行 。 对 Ada 语言 来 说 ,开发 人 员 可 以 选择 独立 的 过 程 和 函数 ,或 
是 在 Ada 包 的 级 别 上 进行 单元 测试 。 

那么 ,什么 是 单元 测试 ? 通常 而 言 ,单元 测试 是 在 软件 开发 过 程 中 要 进行 的 最 低级 别 的 测 
试 活动 ,或 者 说 是 针对 软件 设计 的 最 小 单位 即 程 序 模块 ,函数 ,类 或 方法 所 进行 的 正确 性 检验 
的 测试 工作 ,其 目的 在 于 发 现 每 个 单元 内 部 可 能 存在 的 错误 或 缺陷 。 在 单元 测试 活动 中 ,软件 
的 独立 单元 是 在 与 程序 的 其 他 部 分 相隔 离 的 情况 下 进行 测试 ,主要 工作 分 为 两 个 步骤 : 人 工 
静态 检查 (静态 测试 ) 和 动态 执行 跟踪 (动态 测试 ) 。 前 者 主要 是 保证 代码 算法 的 逻辑 正确 性 
(尽量 通过 人 工 检查 发 现代 码 的 逻辑 错误 ) ,清晰 性 、 规 范 性 ,一致 性 、 算 法 高 效 性 ,并 尽 可 能 地 
发 现 程序 中 可 能 存在 的 错误 或 缺陷 。 后 者 就 是 通过 设计 测试 用 例 , 执 行 待 测 程序 来 跟踪 比较 
实际 结果 与 预期 结果 来 发 现 错误 或 缺陷 。 

单元 测试 采用 的 测试 技术 包括 动态 测试 中 的 黑 盒 测试 技术 和 白 盒 测 试 技术 ,也 包括 静态 
测试 技术 。 统 计 表明 ,使 用 静态 测试 技术 对 单元 进行 测试 能 够 有 效 地 发 现 30 上 一 70%% 的 逻辑 
设计 和 编码 等 错误 或 缺陷 。 但 是 代码 中 仍 会 有 大 量 的 隐 性 错误 或 缺陷 无 法 通过 视觉 检查 发 
现 ,必须 通过 动态 测试 才能 够 捕捉 到 。 所 以 ,单元 测试 中 可 以 采用 静态 测试 和 动态 测试 相 结合 
的 方法 进行 。 

什么 时 候 进行 单元 测试 ?单元 测试 越 早 越 好 , 早 到 什么 程度 ? Windows XP 开发 理论 讲 
究 TDD(Testing Driven Development ,测试 驱动 开发 ) , 先 编写 测试 代码 ,再 进行 开发 。 在 实 
际 的 工作 中 ,可 以 不 必 过 分 强调 先 做 什么 后 做 什么 ,重要 的 是 效果 。 从 经 验 看 , 先 编写 函数 的 
框架 ,然后 编写 测试 函数 ,再 针对 函数 的 功能 编写 测试 用 例 , 然 后 编写 函数 的 代码 ,每 写 一 个 功 
能 点 都 运行 测试 ,随时 补充 测试 用 例 。 这 里 所 谓 先 编写 函数 的 框架 ,是 指 先 编写 函数 空 的 实 
现 , 有 返回 值 的 随便 返回 一 个 值 ,编译 通过 后 再 编写 测试 代码 ,这 时 函数 名 、 参 数 表 、 返 回 类 型 
都 应 该 确定 下 来 了 ,所 编写 的 测试 代码 以 后 需 修改 的 可 能 性 比较 小 。 

单元 测试 是 集成 测试 及 其 他 测试 开展 的 基础 。 那 么 ,单元 测试 应 该 由 谁 来 完成 比较 合适 
呢 ? 单元 测试 与 其 他 测试 不 同 ,单元 测试 也 可 以 看 做 是 编码 工作 的 一 部 分 ,在 编码 的 过 程 中 考 
虑 测试 问题 ,得 到 的 将 是 更 优质 的 代码 ,因为 在 这 个 阶段 程序 员 对 代码 应 该 实现 的 功能 了 解 得 
最 清楚 ,所 以 ,单元 测试 有 时 也 称 自 测试 ,许多 开发 集成 环境 (IDE) 可 以 集成 各 种 单元 测试 工 
具 帮 助 编码 人 员 进 行 单 元 测试 ,如 在 Eclipse 环境 中 集成 Junit, 在 VC 环境 中 集成 Cppunit。 
因此 ,一般 情 况 下 应 该 由 程序 员 完 成 单元 测试 工作 ,并且 在 提交 产品 代码 的 同时 也 提交 测试 代 
码 。 当 然 , 为 了 确保 软件 质量 ,测试 部 门 可 以 对 其 测试 工作 做 一 定 程 度 的 抽样 测试 和 审核 , 必 
要 时 可 以 由 测试 团队 专门 进行 单元 测试 。 

单元 测试 的 流程 一 般 为 : 开发 组 承担 单元 测试 并 在 开发 leader 监督 下 进行 ,保证 使 用 合 
适 的 测试 技术 和 工具 ,根据 单元 测试 计划 和 测试 说 明文 档 中 的 要 求 进行 单元 测试 的 分 析 和 用 
例 的 设计 ,执行 充分 的 测试 ,达到 计划 中 的 覆盖 要 求 , 如 功能 点 覆盖 .语句 覆盖 、 基 路 径 覆 盖 等 ， 
记录 测试 结果 和 单元 测试 日 志 。 另 外 ,在 进行 单元 测试 时 ,建议 有 专人 负责 监控 测试 过 程 , 见 
证 各 个 测试 用 例 的 运行 结果 并 按 要 求 修改 缺陷 。 当 然 ,可 以 从 开发 组 中 选取 一 人 担任 ,也 可 以 
由 质量 保证 组 代表 担任 。 单 元 测试 具有 回归 性 。 

既然 单元 测试 对 开发 人 员 来 说 如 此 重要 .那么 对 于 客户 或 最 终 用 户 也 是 这 么 重要 吗 ? 它 
与 验收 测试 有 关 吗 ? 这 个 问题 很 难 回答 。 事 实 上 ,在 进行 单元 测试 时 常常 并 不 关心 整个 产品 
或 系统 的 确认 、 验 证 及 其 正确 性 等 方面 .主要 侧重 于 功能 .有 时 也 关注 性 能 方面 的 问题 , 即 主要 
是 证 明代 码 的 行为 和 我 们 的 期 望 是 否 一 致 。 只 有 所 有 单元 的 行为 都 通过 了 验证 ,确保 它 和 我 


们 的 期 望 一 致 ,才能 开始 进行 集成 测试 。 所 以 ,足够 的 单元 测试 不 但 能 够 使 开发 工作 变 得 更 轻 
松 , 而 且 对 设计 工作 也 能 提供 帮助 ,甚至 大 大 减少 了 花费 在 调试 上 面 的 时 间 。 

单元 测试 的 目标 就 是 验证 开发 人 员 所 编写 的 编码 是 否 产生 预期 结果 、 是 否 符合 设计 的 要 
求 , 最 终 确 保单 元 符合 需求 。 同 时 ,代码 的 质量 .可 复 用 人 性、 代码 的 可 维护 性 及 代码 的 可 扩展 性 
的 检查 也 是 单元 测试 的 目标 。 符 合 需求 的 单元 代码 通常 应 该 具备 以 下 性 质 : 正确 性 、 清 晰 性 、 
规范 性 ,一致 性 、 高 效 性 、 可 复 用 性 等 。 

。 正确 性 : 代码 逻辑 必须 正确 ,能 够 实现 预期 的 功能 。 

。 清晰 性 : 代码 必须 简明 、 易 懂 , 注 释 准 确 没有 歧义 。 

。 规范 性 : 代码 必须 符合 企业 或 部 门 所 定义 的 共同 规范 ,包括 命名 规则 、 代 码 风 格 等 。 

。 一 致 性 : 代码 必须 在 命名 上 (如 相同 功能 的 变量 尽量 采用 相同 的 标识 符 )、 风 格 上 都 保 

持 统一 。 

。 高 效 性 : 代码 不 但 要 满足 以 上 性 质 , 而 且 需 要 尽 可 能 减少 代码 的 执行 时 间 。 
可 复 用 性 : 代码 尽量 做 到 可 复 用 、 标 准 化 ,便于 以 后 重用 。 

一 些 开发 人 员 和 测试 人 员 其 至 质量 保证 人 员 对 于 单元 测试 存在 一 种 误区 。 他 们 可 能 会 问 
这 样 的 问题 : 为 什么 要 进行 单元 测试 ? 因为 单元 测试 涉及 开发 驱动 器 和 桩 ,这 些 工作 是 单元 
测试 必须 的 ,增加 了 额外 的 工作 ,也 增加 了 成 本 。 原 因 很 简单 ,未 经 测试 覆盖 的 单元 代码 可 能 
会 存在 大 量 的 错误 或 缺陷 ,这 些 错 误 或 缺陷 可 能 是 严重 的 ,可 能 是 微小 的 或 表面 的 ,但 是 这 些 
错误 或 缺陷 还 会 互相 影响 ,尤其 在 开发 过 程 的 后 期 阶段 ,这 些 错误 或 缺陷 可 能 会 扩展 ,一 旦 在 
后 期 发 现 这 些 错误 或 缺陷 ,这 些 错 误 或 缺陷 所 在 的 单元 及 其 相关 联 的 组 件 都 需要 进行 测试 ,其 
至 要 进行 大 规模 的 集成 回归 测试 和 系统 的 回归 测试 。 另 外 ,这 些 暴 露 的 错误 或 缺陷 难于 定位 ， 
结果 会 大 幅度 提高 后 期 测试 和 维护 成 本 ,也 降低 了 开发 商 的 市 场 竞争 力 。 

在 传统 的 软件 测试 过 程 中 ,单元 测试 是 最 早 开始 的 测试 活动 ,是 在 代码 编写 完成 之 后 才 进 
行 的 测试 ,使 用 最 多 的 技术 是 白 盒 测试 技术 。 单 元 测试 被 认为 是 集成 测试 的 基础 ,因为 只 有 通 
过 了 单元 测试 的 模块 才 可 以 把 它们 集成 到 一 起 进行 集成 测试 。 否 则 ,即使 集成 测试 通过 了 , 模 
块 之 间 的 接口 问题 基本 解决 ,但 可 能 存在 很 多 功能 性 等 方面 的 不 安全 因素 。 随 着 软件 开发 技 
术 的 不 断 进步 ,以 及 人 们 对 软件 测试 工作 重要 性 认识 的 增强 ,这 个 阶段 的 测试 通常 在 项 目 详细 
设计 阶段 就 已 经 开始 了 。 由 于 在 软件 开发 周期 后 期 可 能 会 因为 需求 变更 或 功能 完善 等 原因 对 
某 个 单元 的 代码 做 一 些 改动 ,因此 不 妨 把 单元 测试 看 成 是 一 种 活动 ,从 详细 设计 开始 一 直 贯 穿 
于 项 目 开发 的 生命 周期 中 ,认为 单元 测试 工作 是 代码 生成 以 后 的 工作 是 不 正确 的 。 

在 软件 开发 过 程 中 ,需求 频繁 地 修改 和 变动 对 项 目的 影响 较 大 ,尤其 在 开发 后 期 的 需求 变 
化 ,这 些 需 求 的 变化 最 终 都 反映 在 代码 中 。 也 就 是 说 ,编码 本 身 出 现 的 错误 或 缺陷 可 能 并 不 
多 ,更 多 错误 或 缺陷 的 产生 是 由 于 需求 变更 对 原来 的 代码 修改 引起 的 。 所 以 只 要 代码 发 生 了 
变化 ,必须 保证 进行 回归 测试 ,回归 的 程度 根据 实际 情况 而 定 。 

单元 测试 与 集成 测试 、 系 统 测试 及 其 他 级 别 的 测试 相 比 ,单元 测试 的 过 程 简单 ,维护 更 容 
易 , 所 需 的 费用 也 相对 较 低 。 


4.2 单元 测试 环境 及 过 程 


1. 单元 测试 环境 
单元 测试 环境 的 搭建 是 单元 测试 工作 进行 的 前 提 和 基础 ,在 测试 过 程 中 所 起 到 的 作用 


不 言 而 喻 。 显 然 , 单 元 测试 的 环境 并 不 一 定 是 系统 投入 使 用 后 所 需 的 真实 环境 。 那么 ,应 
该 建立 一 个 什么 样 的 环境 才能 够 满足 单元 测试 的 要 求 呢 ? 本 节 将 介绍 如 何 建 立 单元 测试 
的 环境 。 

由 于 一 个 模块 函数、 类 或 类 中 的 一 个 方法 (method) 并 不 是 一 个 能 单独 运行 的 独立 程序 ， 
在 进行 测试 时 需要 同时 考虑 该 单元 和 外 界 的 接口 ,因此 要 用 到 一 些 辅助 模块 来 模拟 与 所 测 模 
块 相 联 的 其 他 模块 。 一 般 把 这 些 辅助 模块 分 为 两 种 : 

(1) 驱动 (driver) 模 块 : 其 作用 相当 于 所 测 模块 的 主 程序 。 它 接收 测试 数据 ,把 这 些 数据 
传送 给 所 测 模块 ,最 后 再 输出 实际 测试 结果 。 驱 动 模块 的 作用 为 : 

@ 接受 测试 输入 

@ 对 输入 进行 判断 ; 

@@ 将 输入 传 给 被 测 单元 ,驱动 被 测 单元 执行 ; 

@ 接受 被 测 单元 执行 结果 ,并 对 结果 进行 判断 ; 

@ 将 判断 结果 作为 用 例 执行 结果 并 输出 测试 报告 。 

驱动 模块 举例 : 

/* 被 测 程序 * / 


int Fun( int in) 


| 


if (in >= 0) 
' 
return 1; 
} 
else 
{ 
return 一 17 
} 
} 


通过 TCL(Tool Command Language, 一 种 通用 的 脚本 语言 ,几乎 在 所 有 的 平台 上 都 可 以 
解释 运行 ,功能 强大 ) 进 行 扩展 指令 编写 时 ,针对 该 被 测 函 数 ,驱动 如 下 : 


/x* 用 户 自 己 扩展 的 用 户 指令 ,用 来 驱动 被 测 函 数 * / 
int Ex_TestFun(ClientData clientData,Tcl_Interp * interp, int argc, char* argv[]) 
{ 
int i; 

int ret, iExceptedRet; 

// 打 开 测试 结果 记录 文件 

FILE #* out; 

out = fopen("D:\result. txt","a"); 


// 第 一 步 : 检查 用 户 输入 参数 个 数 是 否 正 确 
if (3 != argc) 
{ 
fputs("Parameters error", out); 
fflush(out); 
return TCL_ERROR; 
} 


// 第 二 步 : 取出 用 户 输入 参数 
if (TCL OK != Tc] GetInt(interp,argv[1],&i)) 


{ 
return TCL_ ERROR; 
} 


if (TCL OK != Tcl_GetInt(interp,argv[2],&iExceptedRet) ) 


{ 
return TCL ERROR; 


} 
// 第 三 步 : 将 参数 传递 给 被 测 函 数 


ret = Fun(i); 


// 第 四 步 : 将 被 测 函 数 执行 结果 和 输入 的 期 望 结果 进行 比较 ,根据 比较 结果 作为 用 例 执行 结果 输出 
到 测试 报告 中 
if (ret != iExceptedRet) 
{ 
fputs("test fail", out); 
fflush(out); 
} 


else 

{ 
fputs("test success", out); 
fflush(out); 

} 


return TCL_OK; 

} 

(2) 桩 模块 (stub): 其 代替 所 测 模 块 调用 的 子 模块 。 桩 模块 可 以 进行 少量 的 数据 操作 ,不 
需要 实现 子 模块 的 所 有 功能 ,但 要 根据 需要 来 实现 或 代替 子 模块 的 一 部 分 功能 。 桩 模块 是 一 
次 性 模块 ,主要 是 为 了 配合 调用 它 的 父 模块 工作 。 

桩 模块 举例 : 

package JMailPacket; 

public class JMail_stub { 


private static String UT_TC RE 003_050 001 001 = "zacks mail(@163.com"; 


public static boolean SendEmail(String toUser, String Mail Title, String Mail_Context) 
{ 
if(toUser. compareTo(UT_TC 001 006_001 001) == 0) 
return true; 
else 
return false; 


} 

该 桩 模块 的 含义 是 : 类 JMail_stub 为 类 JMail 对 应 的 桩 ; 被 测 类 和 JMail 类 有 调用 关系 ， 
JMail 类 的 功能 是 输入 mail 的 相关 有 效 性 检查 ; 当 被 测 类 进行 测试 时 调用 桩 JMail_stub; 桩 
JMail_stub 代码 中 的 UT_TC_RE_003_050_001_001 为 常量 ,UT_TC_001_006_001_001 为 测 
试用 例 编号 ,系统 用 户 的 email 为 zacks_mail@163. com。 

通过 开发 驱动 器 或 (和 ) 桩 ,被 测试 模块 和 与 它 相 关 的 驱动 模块 或 (和 ) 桩 模块 共同 构成 了 


一 个 “测试 环境 ”, 如 图 4-1 所 示 。 为 了 能 够 正确 地 对 单元 模块 进行 测试 ,驱动 模块 和 桩 模块 的 
编写 ,特别 是 桩 模块 可 能 需要 模拟 实际 子 模块 的 功能 ,因此 桩 模块 的 开发 并 不 是 很 轻松 。 我 们 
常常 希望 驱动 模块 和 桩 模块 的 开发 工作 比较 简单 ,实际 开销 相对 较 低 。 比 如 ,有 了 时候 因为 编写 
桩 模块 是 比较 困难 且 费 时 的 ,我 们 就 会 尽量 避免 编写 桩 模块 , 即 在 项 目 进度 管理 时 将 实际 桩 模 
块 的 代码 编写 工作 安排 在 被 测 模 块 前 编写 ,以 提高 实际 桩 模块 的 测试 频率 ,这 样 单元 测试 的 效 
果 更 好 ,也 提高 了 测试 工作 的 效率 。 值 得 注意 的 是 ,虽然 桩 模块 提前 编写 了 ,但 针对 具体 单元 
模块 的 测试 用 例 数据 可 能 需要 在 测试 前 填写 在 桩 模块 中 或 改变 桩 模块 中 的 数据 。 这 样 做 是 为 
了 保证 能 够 向 上 一 级 模块 提供 稳定 可 靠 的 实际 桩 模块 ,为 后 续 模 块 测试 打下 良好 的 基础 。 驱 
动 模块 的 开发 也 是 必 不 可 少 的 。 但 遗憾 的 是 , 仅 用 简单 的 驱动 模块 和 桩 模块 有 时 不 能 完成 某 
些 模块 的 测试 任务 。 桩 模块 和 驱动 模块 代码 也 需要 进行 配置 管理 。 
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图 4-1 单元 测试 环境 


为 了 确保 可 以 高 质量 地 完成 单元 测试 ,在 设计 桩 模块 和 驱动 模块 时 最 好 多 考虑 一 些 环境 
因素 ,如 开发 环境 及 测试 工具 的 集成 .系统 时 钟 , 文 件 状态 (假如 ,单元 模块 需要 从 外 部 读 入 数 
据 文件 ,文件 的 位 置 .格式 等 必须 按照 要 求 准备 完毕 ) 、 单 元 加 载 地 点 、 甚 至 外 部 设备 ,以 及 与 实 
际 环境 相同 的 编译 器 、 操 作 系 统 、 计 算 机 等 ,这 些 都 要 在 测试 设计 过 程 中 给 予 关注 。 

在 面向 对 象 的 系统 中 ,一 般 以 类 为 测试 单元 ,有 时 也 会 以 类 内 方法 作为 单元 。 对 于 包 或 子 
系统 而 言 , 可 以 设计 一 个 测试 模块 类 来 做 驱动 模块 ,用 于 测试 包 中 所 有 的 待 测试 类 。 最 好 不 要 
在 每 个 类 中 用 一 个 测试 函数 的 方法 来 测试 跟踪 类 中 所 有 的 方法 。 这 样 的 好 处 在 于 : 

(1) 可 以 同时 测试 包 中 所 有 的 类 或 方法 ,也 可 以 方便 地 测试 跟踪 指定 的 类 或 方法 。 

(2) 能 够 联合 使 用 所 有 测试 用 例 对 同一 段 代码 执行 测试 ,以 发 现 更 多 问题 。 

(3) 便于 回归 测试 , 当 某 个 类 做 了 修改 之 后 ,只 要 执行 测试 类 就 可 以 执行 所 有 被 测 的 类 或 
方法 。 这 样 不 但 能 够 方便 地 检查 、 跟 踪 所 修改 的 代码 ,而 且 能 够 检查 出 修改 对 包 内 相关 类 或 方 
法 所 造成 的 影响 ,使 得 由 于 修改 导致 的 错误 或 缺陷 及 时 被 发 现 。 

(4) 复 用 测试 方法 ,使 测试 单元 保持 持久 性 ,并 可 以 用 既 有 的 测试 来 设计 相关 其 他 测试 。 

(5) 将 测试 代码 与 产品 代码 分 开 , 使 代码 更 清晰 、 简 洁 ; 提高 测试 代码 与 被 测 代码 的 可 维 
护 性 。 

创建 测试 环境 除了 开发 一 些 桩 模块 和 驱动 模块 使 被 测 对 象 能 够 运行 起 来 之 外 ,还 要 模拟 
生成 测试 数据 或 状态 ,为 单元 运行 准备 动态 环境 。 同 时 ,要 注意 测试 过 程 监控 ,包括 缺陷 的 记 
录 跟 踪 测试 结果 分 析 等 。 具 体 单元 测试 过 程 在 下 面 进行 描述 。 

2. 单元 测试 过 程 

单元 测试 的 主要 过 程 如 下 : 

(1) 详细 设计 说 明 书 (规约 ) 通 过 评审 。 


(2) 编制 单元 测试 计划 (测试 经 理 ) 。 

(3) 编制 子 系统 单元 测试 计划 (如 果 需 要 的 话 )( 开 发 组 ) 。 

(4) 编写 测试 代码 并 开发 单元 测试 用 例 ( 开 发 组 ) 。 

(5) 代码 审查 (开发 组 或 测试 组 ) 。 

(6) 测试 用 例 评 审 ( 开 发 组 或 测试 组 ) 。 

(7) 测试 执行 (开发 组 ) 。 

(8) 缺陷 提交 (开发 组 ) 。 

(9) 缺陷 跟踪 (开发 组 或 测试 组 ) 。 

(10) 测试 报告 及 评审 (开发 组 或 测试 组 )( 未 通过 回 到 第 (4) 步 )。 

在 以 上 的 步骤 中 ,详细 设计 说 明 书 通过 评审 是 单元 测试 的 进入 准则 。 单 元 测试 的 退出 准 
则 是 测试 报告 通过 评审 ,报告 包括 代码 获准 入 配置 管理 库 的 配置 项 、Bug 清单 等 。 单 元 测试 过 
程 中 的 单元 测试 计划 不 同 的 测试 组 织 其 格式 可 能 存在 差别 , 表 4-1 是 一 个 单元 测试 计划 模板 
范例 , 供 参考 。 单 元 测试 中 的 代码 审查 、 用 例 评审 使 用 第 2 章 的 内 容 作为 技术 基础 。 用 例 的 设 
计 使 用 第 3 章 中 分 析 的 黑 盒 测试 方法 和 白 盒 测试 方法 及 两 种 方法 的 结合 作为 技术 基础 。 缺 陷 
的 提交 和 跟踪 及 报告 一 般 借助 于 工具 来 支撑 ,如 bugzilla、TestDirector 等 工具 。 


表 4-1 单元 测试 计划 模板 (范例 ) 


单元 测试 计划 (Unit Test Plan) 
1 引言 
1.1 目的 

本 文档 为 XX 系统 的 单元 测试 活动 提供 范围 方法 ,资源 和 进度 方面 的 指导 。 

本 文档 的 读者 主要 是 开发 (测试 ) 经 理 、 测 试 人 员 和 开发 人 员 。 
1.2 测试 策略 

以 类 为 单元 ,采用 独立 的 单元 测试 策略 ,通过 设计 相应 的 驱动 和 桩 的 方法 来 测试 类 中 的 方法 。 在 选择 
类 的 被 测 方法 时 ,根据 方法 的 规模 和 复杂 度 进行 判定 。 非 空 非 注释 代码 行 数 LOC 二 20, 或 者 复杂 度 VG>3 
的 方法 进行 单元 测试 ,其 他 方法 不 进行 单元 测试 。 

对 于 子 类 的 测试 采用 分 层 增 量 测试 (Hierarchical Incremental Testing) 策 略 , 对 子 类 的 变化 部 分 设计 新 
的 测试 用 例 , 与 父 类 相同 的 部 分 则 重用 父 类 的 测试 用 例 。 

执行 单元 测试 的 次 序 是 根据 (软件 详细 设计 说 明 书 ) 中 的 用 例 实现 交互 图 ,从 图 中 最 小 依赖 关系 的 类 
开始 测试 ,再 逐步 扩大 到 依赖 关系 较 强 的 类 ,直至 所 有 类 测试 完毕 。 
1.3 范围 

单元 测试 主要 包含 了 计划 阶段 ,设计 阶段 .实现 阶段 和 执行 阶段 4 个 阶段 。 本 单元 测试 计划 是 整个 软 
件 开发 项 目 中 的 一 部 分 ,起 始 于 详细 设计 阶段 ,直到 单元 测试 阶段 结束 后 终止 。 该 计划 主要 处 理 与 XX 系 
统 单元 测试 有 关 的 任务 安排 ,资源 需求 、 人 力 需 求 . 风 险 管理 、 进 度 安排 等 内 容 。 
1.4 参考 文献 

《软件 需求 规格 说 明 书 (Software Requirement Specification)》 

《软件 详细 设计 说 明 书 (Software Design Descriptions)》 

《用 户 界面 规格 说 明 书 (User Interface Specification)》 
1.5 术语 

和 业务 及 技术 相关 的 术语 。 
2 测试 项 目 

根据 (软件 详细 设计 说 明 书 ) 中 的 详细 设计 内 容 ,单元 测试 的 测试 项 目 如 以 下 2. 1 一 2. 8 节 所 示 。 


2.1 XX 模块 
设计 类 标识 :XX 设计 类 

方法 标识 符 方法 名 代码 行 (LOC) 复杂 度 (VG) 
2.2 XX 模块 
3 被 测 函数 

根据 测试 策略 中 制定 的 被 测 方法 选取 标准 ,被 测 函 数 如 表 1 所 示 。 
表 1 被 测 函数 
方法 标识 符 方法 名 代码 行 (LOC) 复杂 度 (VG) 


4 不 被 测 函 数 (方法 ) 
对 不 满足 测试 策略 中 的 选取 被 测试 方法 标准 的 方法 将 不 进行 单元 测试 ,但 这 些 方法 必须 经 过 严格 代 
码 检视 ,以 保证 不 会 出 现 一 些 低 级 性 的 错误 ,并 且 在 集成 测试 阶段 统一 验证 其 接口 功能 的 正确 性 。 不 被 测 
函数 如 表 2 所 示 。 
表 2 不 被 测 函数 


方法 标识 符 方法 名 代码 行 (LOC) 复杂 度 (VG) 


5 测试 方法 

根据 类 规约 和 操作 规约 构建 测试 用 例 , 合 理 利用 传统 等 价 类 划分 法 ,边界 值 分 析 法 、 判 定 表 法 等 黑 盒 
测试 方法 和 语句 覆盖 路 径 覆 盖 等 白 盒 测 试 方法 。 

对 具有 特殊 需求 的 类 辅 以 下 面 两 种 方法 设计 测试 用 例 : 

(1) 根据 状态 转换 图 构建 测试 用 例 。 该 方法 根据 被 测试 的 类 的 对 象 所 处 的 状态 以 及 状态 之 间 的 转移 
来 构造 测试 用 例 , 对 状态 之 间 和 状态 内 部 的 每 一 转换 及 其 可 能 发 生 的 异常 转换 、 转 换 的 监护 条 件 等 进行 全 
面 测试 。 

(2) 基于 实现 构建 测试 用 例 。 该 方法 利用 传统 逻辑 覆盖 法 .数据 流 分 析 法 等 白 盒 测试 技术 对 程序 的 逻 
辑 结构 或 数据 流 进行 测试 ,以 达到 一 定 的 代码 覆盖 率 。 

更 详细 的 测试 策略 描述 参考 (单元 测试 说 明 》。 


6 测试 通过 /失败 标准 

测试 通过 的 标准 表述 如 下 : 

(1) 所 有 单元 测试 的 用 例 都 被 执行 并 通过 ; 

(2) 所 有 发 现 的 缺陷 都 被 修正 并 通过 回归 测试 ; 

(3) 所 有 被 测 对象 的 前 置 条 件 和 后 置 条 件 组 合 覆盖 率 达到 100% ,或 能 明确 给 出 不 需要 达到 的 理由 ; 

(4) 单元 测试 报告 被 授权 人 批准 。 

测试 失败 标准 表述 如 下 : 

(1) 严重 缺陷 密度 大 于 15 个 /KLOC; 

(2) 发 现 软件 结构 有 重大 设计 问题 ,其 修改 会 导致 20% 以 上 的 接口 .功能 .数量 的 变化 ,进一步 测试 相 
关 特 性 已 经 无 意义 ; 

(3) 发 现 关键 功能 未 被 设计 ,该 功能 的 设计 会 导致 20% 以 上 的 接口 ,功能 、 数 量 的 变化 ,进一步 测试 相 
关 特 性 已 经 无 意义 。 

测试 结果 审批 过 程 : 

开发 人 员 提 交 单 元 测试 报告 一 开发 或 测试 经 理 签字 并 提交 SQA-~SQA 对 报告 进行 评审 并 签字 (测试 
经 理 参与 ) 一 产品 经 理 签字 。 
7 测试 挂 起 /恢复 的 条 件 

测试 挂 起 的 条 件 有 : 

(1) 当 某 个 类 在 单元 测试 执行 过 程 中 发 现 有 阻塞 用 例 的 时 候 , 该 类 的 单元 测试 被 挂 起 。 

(2) 当 有 20% 以 上 的 被 测 类 都 遇 到 有 阻塞 用 例 的 时 候 , 所 有 类 的 单元 测试 被 挂 起 。 

(3) 当 出 现 有 新 增 需求 的 时 候 , 与 该 需求 相关 的 所 有 类 的 单元 测试 被 挂 起 。 

(4) 当 开 发 人 员 提 出 要 进行 设计 变更 的 时 候 , 相 关 类 的 单元 测试 将 被 挂 起 。 

测试 恢复 的 条 件 有 : 

(1) 测试 被 挂 起 的 条 件 已 经 被 解决 。 

(2) 需要 恢复 测试 的 对 象 达 到 单元 测试 人 口 条 件 , 在 这 里 要 求 这 些 被 测 对 象 已 经 通过 代码 走读 (要 提 
交 走 读 报告 ) 和 语法 检查 (要 提交 检查 结果 ) 。 
8 单元 测试 交付 物 

单元 测试 计划 (Unit Test Plan) ; 

单元 测试 设计 规格 (Unit Test Design Specification) ; 

单元 测试 用 例 规格 (Unit Test Case Specification) ; 

单元 测试 用 例 脚本 ; 

单元 测试 驱动 和 桩 代码 ; 

单元 测试 执行 日 志 (Unit Test Log); 

单元 测试 报告 (Unit Test Report) 。 


9 单元 测试 任务 
单元 测试 任务 表 如 表 3 所 示 。 
表 3 单元 测试 任务 表 
任务 标识 任务 描述 责任 人 优先 级 依赖 关系 
UT-TASK-001 “| 单元 测试 计划 制定 测试 经 理 高 
UT-TASK-003 “| 单元 测试 计划 评审 SQA 中 UT-TASK-001 
UT-TASK-005 “| 单元 测试 计划 修改 测试 经 理 中 UT-TASK-003 
UT-TASK-007 “| 单元 测试 设计 规格 制定 开发 或 测试 人 员 中 UT-TASK-003 
UT-TASK-009 ”| 单元 测试 设计 规格 评审 SQA 中 UT-TASK-007 


续 表 
任务 标识 任务 描述 责任 人 优先 级 依赖 关系 
UT-TASK-011 “| 单元 测试 设计 规格 修改 开发 或 测试 人 员 中 UT-TASK-009 
UT-TASK-013 “| 单元 测试 用 例 规 格 设计 开发 或 测试 人 员 高 UT-TASK-009 
UT-TASK-015 “| 单元 测试 用 例 规格 评审 SQA 中 UT-TASK-013 
UT-TASK-017 “| 单元 测试 用 例 规格 修改 开发 或 测试 人 员 中 UT-TASK-015 
UT-TASK-019 tie 开发 或 测试 人 员 中 UT-TASK-015 
UT-TASK-021 “| 驱动 . 桩 ,脚本 代码 走 查 SQA 低 UT-TASK-019 
UT-TASK-023 ”| 驱动, 桩 、 和 脚本 代码 修改 开发 或 测试 人 员 低 UT-TASK-021 
T-TASK-025 单元 测试 执行 及 回归 开发 或 测试 人 员 高 UT-TASK-023 
UT-TASK-027 “| 单元 测试 报告 测试 经 理 高 UT-TASK-025 
UT-TASK-029 “| 单元 测试 报告 审批 开发 或 测试 经 理 高 UT-TASK-027 
10 环境 需求 
10.1 硬件 需求 
10.2 软件 需求 
10.3 测试 工具 
如 Logiscope 4.0、JUnit 4.0。 
10.4 其 他 
11 角色 和 职责 
单元 测试 角色 和 职责 如 表 4 所 示 。 
表 4 单元 测试 角色 和 职责 对 应 表 
角 色 职 责 
产品 经 理 解决 资源 (包括 人 、 工 具 等 ) 需 求 ,对 单元 测试 结果 进行 监督 
开发 经 理 协助 制定 单元 测试 计划 ,安排 单元 测试 任务 
测试 经 理 制定 单元 测试 计划 ,安排 单元 测试 任务 ,参与 单元 测试 结果 验收 
SQA 对 单元 测试 过 程 (包括 代码 走读 ,正规 检视 活动 ) 进 行 监控 
开发 或 (和 ) 测试 完成 单元 测试 需要 的 输入 ,并 完成 单元 测试 设计 规格 ,单元 测试 用 例 规 格 ,单元 
人 员 测试 规程 的 制定 ,执行 单元 测试 ,记录 发 现 问题 ,修改 问题 ,并 负责 问题 的 回归 测 
试 。 与 此 同时 ,负责 定位 问题 和 解决 问题 
12 人 员 及 培训 


(1) 需要 名 一 年 以 上 工作 经 验 的 开发 人 员 ,并 且 他 们 应 在 详细 设计 开始 之 后 全 职 投 入 到 单元 测试 
项 目 组 中 。 

(2) 在 详细 设计 完成 之 前 ,需要 完成 对 项 目 需 求 、 系 统 设计 详细 设计 、 单 元 测试 技术 、 单 元 测试 脚本 技 
术 方 面 的 培训 。 

(3) 在 编码 完成 之 前 要 完成 缺陷 跟踪 流 使 用 ,测试 日 志 表格 使 用 测试 工具 使 用 的 培训 。 

以 上 培训 大 约 需要 花费 每 人 XX 人 时 的 工作 量 。 
13 ”单元 测试 进度 

单元 测试 进度 安排 如 表 5 所 示 。 


表 5 单元 测试 进度 安排 表 
任务 标识 任务 描述 起 始 日 期 周期/ 天 
UT-TASK-001 | 单元 测试 计划 制定 系统 设计 结束 后 X 天 内 
UT-TASK-003 | 单元 测试 计划 评审 单元 测试 计划 完成 后 又 天 内 
UT-TASK-005 | 单元 测试 计划 修改 单元 测试 计划 评审 完成 后 天 内 
UT-TASK-007 | 单元 测试 设计 规格 制定 单元 测试 计划 评审 完成 后 X 天 内 
UT-TASK-009 | 单元 测试 设计 规格 评审 单元 测试 设计 规格 完成 后 天 内 
ne 
UT-TASK-011 | 单元 测试 设计 规格 修改 ES 
UT-TASK-013 | 单元 测试 用 例 规格 制定 ete 
UT-TASK-015 | 单元 测试 用 例 规格 评审 单元 测试 用 例 规格 完成 后 X 天 内 
UT-TASK-017 | 单元 测试 用 例 规格 修改 ee 
UTLTSK_010 | 单元 测试 驱动 \ 丁 \ 用 合 膨 本 代码 | 单元 测试 用 人 规格 评审 完成 后 
实现 天 内 ,并 且 编码 阶段 已 经 开始 
UT-TASK-021 | 单元 测试 驱动 \ 桩 .脚本 代码 走读 “| 下 测试 又 动 桩 ,用例 脚本 代码 
完成 后 X 天 
UT-TASK-023 | 单元 测试 驱动 . 桩 .脚本 代码 修改 page a 
一 单元 测试 驱动 . 桩 .脚本 代码 走读 
| 后 X 天 ,并 且 编 码 阶段 已 经 结束 
UT-TASK-027 | 单元 测试 报告 ee 
UT-TASK-029 | 单元 测试 报告 审批 单元 测试 报告 完成 后 X 天 内 
风险 预 留 时 间 单元 测试 阶段 工作 中 任意 时 候 
单元 测试 阶段 里 程 碑 时 间 点 XXXX-XXXX 
14 ”风险 和 应 急 计划 
风险 和 应 急 计划 安排 如 表 6 所 示 。 
表 6 风险 和 应 急 计划 (举例 ) 
风险 ID| 风险 描述 责任 人 优先 级 规避 措施 应 急 计划 
在 产品 的 预算 中 体现 这 部 分 
需求 i 
人 员 无 法 及 时 | 开发 或 测试 定期 催促 人 力 资源 部 进行 资源 | 推 壕 进度 计划 
1 高 进行 招聘 
到 位 经 理 协调 a 
从 可 能 空闲 的 产品 部 中 物色 
人 员 
在 人 力 预 算 中 给 出 人 员 技 能 
要 求 提高 培训 的 强度 
2 对 提供 的 人员 进 行 技能 面 坛 。 | 加强 培训 效果 监控 
及 从 其 他 产品 部 门 协调 有 能 力 的 | 对 工作 输出 加 强 检视 
人 员 


续 表 
风险 ID| ”风险 描述 责任 人 优先 级 规避 措施 应 急 计 划 
在 产品 预算 中 尽早 体现 这 部 分 
需求 采用 人 工分 析 程 序 
测试 工具 无 法 | 开发 或 测试 低 联系 其 他 产品 ,看 是 否 有 空闲 | 规模 
到 位 人 员 的 License 允许 使 用 规模 估计 值 
尽早 联系 工具 代理 商 , 洽 谈 采 | 自行 开发 测试 工具 
购 事宜 
15 审批 
计划 提交 人 签字 日期: 
开发 经 理 签字 : 日 期 : 
产品 经 理 签字 : 日 期 : 


4.3 单元 测试 策略 


前 面 曾 提 及 单元 测试 涉及 的 测试 技术 通常 有 针对 被 测 单元 需求 的 功能 测试 .用 于 代码 评 
审 和 代码 走 查 的 静态 测试 . 白 盒 测 试 ,状态 转换 测试 (主要 是 针对 类 的 测试 ) 及 可 能 的 非 功 能 测 
试 。 这 里 的 非 功能 测试 是 指 对 单元 的 算法 性 能 .压力 或 者 可 靠 性 或 安全 性 等 方面 的 测试 ,这 并 
不 是 单元 测试 的 重点 ,但 在 适当 的 时 候 也 要 进行 ,如 单元 模块 性 能 的 好 坏 会 间接 地 影响 整个 系 
统 的 性 能 ; 单元 模块 的 安全 性 直接 影响 到 整个 系统 的 安全 等 。 

做 好 单元 测试 ,提高 单元 测试 的 质量 ,仅仅 了 解 单元 测试 的 技术 还 远 远 不 够 ,选择 合适 
的 单元 测试 策略 也 至 关 重 要 。 单 元 测试 的 各 个 组 件 不 是 孤立 的 ,是 整个 系统 的 组 成 部 分 ， 
单元 测试 需要 了 解 该 单元 组 件 在 整个 系统 中 的 位 置 , 它 被 哪些 组 件 调 用 ,该 单元 组 件 本 身 又 
调用 哪些 组 件 , 最 好 的 情况 是 在 进行 单元 组 件 的 测试 时 已 经 全 面 地 了 解 了 单元 组 件 的 层次 及 
调用 关系 ,在 此 基础 上 ,单元 测试 考虑 选择 如 下 三 种 策略 : 自 顶 向 下 的 单元 测试 (Top Down 
Unit Testing) 策 略 . 自 底 向 上 的 单元 测试 (Bottom Up Unit Testing) 策 略 和 孤立 的 单元 测试 
(Isolation Unit Testing) 策 略 。 

1. 自 项 向 下 的 单元 测试 策略 

1) 步骤 

(1) 以 单元 组 件 的 层次 及 调用 关系 为 依据 ,从 最 顶层 开始 ,把 被 顶层 调用 的 单元 做 成 桩 模块 。 

(2) 对 第 二 层 单元 组 件 进行 测试 ,如 果 第 二 层 单元 组 件 又 被 其 上 层 调用 ,以 上 层 已 测试 的 
单元 代码 为 依据 开发 驱动 模块 来 测试 第 二 层 单 元 组 件 。 同 时 ,如 果 有 被 第 二 层 单元 组 件 调用 
的 下 一 层 单元 组 件 , 则 还 需 依据 其 下 一 层 单元 组 件 开发 桩 , 桩 的 数量 可 以 有 多 个 。 

(3) 依 此 类 推 , 直 到 全 部 单元 组 件 测试 结束 。 

2) 优点 

因为 单元 测试 是 直接 或 间接 地 以 单元 组 件 的 层次 及 调用 关系 为 依据 ,所 以 可 以 在 集成 测 
试 之 前 为 系统 提供 早期 的 集成 途径 。 由 于 详细 设计 一 般 都 是 自 项 向 下 进行 设计 的 ,这 样 自 顶 
向 下 的 单元 测试 策略 在 顺序 上 同 详细 设计 一 致 ,因此 测试 可 以 与 详细 设计 和 编码 工作 重 共 或 
交叉 进行 。 


3) 缺点 

由 于 单元 测试 需要 开发 驱动 器 或 (和 ) 桩 模块 , 随 着 单元 测试 的 不 断 进行 ,测试 过 程 也 会 变 
得 越 来 越 复杂 ,测试 难度 以 及 开发 和 维护 的 成 本 都 不 断 增 加 ; 低层 次 单元 组 件 的 结构 覆盖 率 
也 难以 得 到 保证 ; 由 于 需求 变更 或 其 他 原因 而 必须 更 改 任何 一 个 单元 组 件 时 ,就 必须 重新 测 
试 该 单元 下 层 调 用 的 所 有 单元 ; 低层 单元 测试 依赖 顶层 测试 ,无 法 进行 并 行 测试 ,使 测试 进度 
受到 不 同 程度 的 影响 ,延长 了 测试 周期 。 

4) 总 结 

从 上 述 分 析 中 ,不 难看 出 该 测试 策略 的 成 本 要 高 于 孤立 的 单元 测试 成 本 ,因此 从 测试 成 本 
方面 来 考虑 ,这 并 不 是 最 佳 的 单元 测试 策略 。 在 实际 工作 中 ,如 果 单 元 已 经 通过 独立 测试 ,可 
以 选择 此 方法 。 

2. 自 底 向 上 的 单元 测试 

1) 步骤 

(1) 以 单元 组 件 的 层次 及 调用 关系 为 依据 , 先 对 组 件 调 用 图 上 的 最 底层 组 件 进行 测试 , 模 
拟 调用 该 组 件 的 模块 为 驱动 模块 (器 )。 

(2) 对 上 一 层 单元 组 件 进行 单元 测试 ,开发 调用 本 层 单元 组 件 的 驱动 器 ,同时 ,要 开发 被 
本 层 单元 组 件 调 用 的 已 经 完成 单元 测试 的 下 层 单元 组 件 的 桩 。 驱 动 器 的 开发 依据 调用 被 测 单 
元 组 件 的 代码 , 桩 的 开发 依据 被 本 层 单元 组 件 调用 的 已 经 完成 单元 测试 的 下 层 单元 组 件 代 码 。 

(3) 依 此 类 推 ,直到 全 部 单元 组 件 测试 结束 。 

2) 优点 

因为 单元 组 件 的 层次 越 靠 近 下 层 ,组 件 本 身 的 调用 或 控制 逻辑 越 少 ,最 底层 组 件 一 般 是 完 
全 处 理 实际 业务 的 组 件 ,首先 进行 底层 单元 组 件 的 测试 ,无 须 太 多 依赖 单元 组 件 的 层次 和 调用 
结构 ,可 以 直接 从 功能 设计 中 获取 测试 用 例 ; 可 以 为 系统 提供 早期 的 集成 途径 ; 在 详细 设计 
文档 中 缺少 结构 细节 时 可 以 使 用 该 测试 策略 。 

3) 缺点 

随 着 单元 测试 的 不 断 进行 ,测试 过 程 会 变 得 越 来 越 复杂 ,测试 周期 延长 ,测试 和 维护 的 成 
本 增加 ; 随 着 各 个 基本 单元 逐步 加 入 ,系统 会 变 得 异常 庞大 ,因此 测试 人 员 不 容易 控制 ; 越 接 
近 顶 层 的 单元 组 件 的 测试 ,其 结构 覆盖 率 就 越 难 以 保证 。 另 外 ,顶层 测试 易 受 底层 组 件 变更 的 
影响 ,任何 一 个 组 件 修改 之 后 ,直接 或 间接 调用 该 组 件 的 所 有 单元 都 要 重新 测试 。 由 于 只 有 在 
底层 单元 测试 完毕 之 后 才能 够 进行 顶层 单元 的 测试 ,因此 并 行 性 不 好 。 另 外 , 自 底 向 上 的 单元 
测试 也 不 能 和 详细 设计 、 编 码 同 步 进行 。 

4) 总 结 

相对 其 他 测试 策略 而 言 ,该 测试 策略 比较 合理 ,尤其 是 需要 考虑 对 象 或 复 用 时 。 它 属于 面 
向 功能 的 测试 ,而 非 面向 结构 的 测试 。 对 那些 以 高 覆盖 率 为 目标 或 者 软件 开发 时 间 紧 张 的 软 
件 项 目 来 说 ,这 种 测试 方法 不 适用 。 

3. 孤立 测试 

1) 步骤 

无 须 考虑 每 个 单元 组 件 与 其 他 组 件 之 间 的 关系 ,分 别 为 每 个 组 件 单独 设计 桩 模块 和 驱动 
模块 ,逐一 完成 所 有 单元 组 件 的 测试 。 

2) 优点 

该 方法 简单 .容易 操作 ,因此 所 需 测试 时 间 短 ,能够 达到 高 覆盖 率 。 因 为 一 次 测试 只 需 测 


试 一 个 单元 组 件 , 其 驱动 模块 比 自 底 向 上 的 驱动 模块 设计 简单 ,而 其 桩 模块 的 设计 也 比 自 顶 据 
下 策略 中 使 用 的 桩 模块 简单 。 另 外 ,各 组 件 之 间 不 存在 依赖 性 ,所 以 单元 测试 可 以 并 行进 行 。 
如 果 在 测试 中 增添 人 员 ,可 以 缩短 项 目 开 发 时 间 。 

3) 缺点 

不 能 为 集成 测试 提供 早期 的 集成 途径 。 设 计 的 多 个 桩 模块 和 驱动 模块 不 依赖 于 单元 组 件 
的 层次 及 调用 关系 ,增加 了 额外 的 测试 成 本 。 

4) 总 结 

该 方法 是 比较 理想 的 单元 测试 方法 。 如 能 对 集成 测试 起 到 辅助 作用 ,有 利于 缩短 项 目的 
集成 测试 时 间 和 项 目的 开发 时 间 。 


4. 综合 测试 
在 单元 测试 中 ,可 以 考虑 将 这 三 种 方法 结合 使 用 ,以 下 是 综合 使 用 自 底 向 上 测试 策略 和 和 孤 
立 测试 策略 的 例子 。 


下 面 是 判断 三 角形 类 型 的 C 语言 代码 : 


#include< stdio.h> 
int x, y, 2; 
void GetInput( int av int b, int c) 
{ 
int cljc2,c3> 
do 
{printf("\nenter 3 integers(1<=x<=200) which are sides of triangle\n"); 
scanf("%d, %d, %d",&a, gb, Sc); 
cl=(1<=a)gg(a<= 200); 
c2= (1<=b)g&g(b<= 200); 
c3= (1<=c)&&g(c<=200); 
if(!cl)printf("value of a is not in the range of permitted values\n"); 
if(!c2)printf("value of b is not in the range of permitted values\n"); 
if(!c3)printf("value of c is not in the range of permitted values\n");} 
while(!cl |‖ !c2 ‖ 1c3); 
x=a;y=b;z=c; 
printf("\nside A is %d",x); 
printf("\nside B is %d",y); 
printf("\nside C is %d",z); 


int IsTrian( int av int b, int c) 
if((a<(b+c))&&(b<(a+c))&&(c<(a+b)))return 1; 
else return 0; 


} 


void TeterTYpe( int a, int b, int c) 
{ 
if(!IsTrian(a, b,c))printf("\nnot a triangle! \n"); 
else {1£( (a == b)gk(b== c))printf("Nnequilateral\a"); 
else{ if((a!=b)&&(a!= c)&&(b!= c))printf("\nscalene\n"); 
else printf("\nisosceles\n");} 


GetInput (x, y,2); 
DeterType(x, y, 2); 
return 0; 


} 
通过 以 上 代码 可 以 画 出 图 4-2 所 示 的 模块 结构 。 
对 于 图 4-2 所 示 的 模块 结构 在 进行 单元 测试 时 可 以 采 ET 


取 自 底 向 上 的 单元 测试 法 和 孤立 的 单元 测试 法 结合 ,也 就 
是 所 谓 的 综合 测试 。 首 先 用 自 底 向 上 的 单元 测试 法 开发 模 


GetIinputO DeterType0 


块 GetInput() 和 IsTrian() 的 驱动 器 并 测试 这 两 个 模块 , 然 ~ 
后 用 孤立 的 单元 测试 法 先 开 发 模块 DeterType() 的 桩 和 驱 Ey 
动 器 并 测试 ; 同样 ,再 开发 main() 桩 并 测试 ,以 完成 整个 模 
块 的 单元 测试 。 图 4-2 三 角形 问题 的 模块 结构 图 
4.4 单元 测试 的 分 析 和 用 例 设计 

1. 单元 测试 分 析 


单元 测试 分 析 是 单元 测试 用 例 设计 的 基础 ,全 面 地 分 析 才 能 设计 出 合理 的 测试 用 例 。 单 
元 测试 的 分 析 涉 及 详细 设计 代码 ,功能 业务 需求 、 非 功能 业务 需求 .组件 内 部 数据 结构 、 组 件 
接口 ,甚至 涉及 组 件 运行 时 硬盘 的 剩余 空间 不 足 情况 、 网 络 出 现 故 障 情况 缓冲 区 溢出 情况 等 
方方面面 。 本 节 将 从 不 同 侧面 对 单元 测试 的 分 析 进 行 讨论 。 

做 好 单元 测试 的 分 析 需 要 有 了 解 系统 的 业务 方面 的 需求 .具有 单元 及 其 他 级 别 的 测试 经 
验 以 及 丰富 的 测试 技术 和 其 他 方面 的 知识 ,所 以 对 于 经 验 丰富 的 测试 人 员 常 常 能 够 轻松 地 分 
析出 单元 最 可 能 出 现 的 问题 ,但 是 对 于 没有 经 验 或 经 验 很 少 的 测试 人 员 来 讲 , 很 难 做 到 。 下 面 
总 结 了 一 些 单元 测试 分 析 的 指导 原则 ,希望 使 读者 在 测试 工作 中 能 够 有 的 放 矢 、 有 章 可 循 : 

(1) 检查 详细 设计 是 否 通过 评审 并 验证 其 和 代码 迎 辑 的 一 致 性 ,为 代码 审查 和 白 盒 测试 
用 例 设计 服务 。 单 元 测试 无 论 是 采取 静态 测试 方法 还 是 动态 测试 方法 ,其 依据 是 详细 设计 规 
约 。 例 如 ,在 代 发 工资 系统 中 , 读 取代 发 工资 文件 的 模块 详细 设计 需要 对 读 取 的 代 发 工资 文件 
总 额 和 代 发 工资 的 人 数 进行 验证 ,即将 代 发 工资 文件 中 的 人 数 和 工资 分 项 汇总 并 与 代 发 工资 
文件 中 的 总 人 数 和 总 工资 额 比较 验证 。 如 果 代 码 中 没有 这 个 验证 迎 辑 或 者 逮 辑 有 误 , 就 出 现 
了 详细 设计 规约 和 代码 巡 辑 的 一 致 性 问题 。 假 如 没有 明确 的 详细 设计 规约 ,可 以 询问 相关 人 员 ， 
自己 确定 一 些 需求 ,或 者 安排 用 户 参 与 以 便 及 时 获得 反馈 ,对 自己 确定 的 需求 假设 进行 调整 。 在 
整个 软件 开发 的 生命 周期 中 ,由 于 需求 的 更 新 有 可 能 使 得 判断 代码 “正确 ”的 标准 改变 。 对 于 那 
些 涉及 大 量 测试 数据 的 测试 ,可 考虑 使 用 一 个 独立 的 数据 文件 来 存储 这 些 数 据 , 做 单元 测试 时 直 
接 读 取 这 些 数 据 , 但 前 提 是 在 使 用 数据 文件 之 前 要 进行 仔细 检查 ,以 免 引 入 不 必要 的 错误 。 

(2) 分 析 单 元 组 件 涉及 的 所 有 功能 点 和 非 功能 的 需求 ,为 功能 性 和 非 功能 性 用 例 设计 服 
务 。 功 能 点 要 划分 到 最 小 ,如 ATM 取款 单元 组 件 具 有 正常 取款 、 检 查 输入 的 取款 值 是 否 合 
法 检查 超出 当天 的 最 大 取款 、 比 较 取 款额 和 余额 .显示 及 打印 收据 等 功能 点 。 非 功能 需求 方 
面 ,如 算法 的 效率 等 。 

(3) 分 析 单 元 组 件 是 否 满足 所 有 的 边界 条 件 ,为 经 典 的 边界 值 方法 设计 用 例 服务 。 边 界 


条 件 是 指 软件 变量 的 操作 或 取 值 界限 ,在 第 3 章 的 3. 1. 1 节 有 过 详细 分 析 。 

(4) 对 强制 发 生 的 一 些 错误 情况 进行 分 析 , 为 意外 情况 设计 补充 用 例 服务 。 软 件 系 统 在 
实际 使 用 过 程 当 中 ,总 会 有 意 想 不 到 的 各 种 各 样 的 情况 和 错误 发 生 , 如 对 一 个 底层 通信 软件 模 
块 测试 时 ,主动 造成 网 络 故障 情况 ; 对 一 个 运行 时 需要 大 量 存 取 空 间 的 模块 测试 时 ,主动 造成 
磁盘 空间 不 足 ; 对 一 个 运行 时 需要 大 量 内 存 或 需要 开辟 大 量 内 存 空 间 的 模块 测试 时 ,主动 造 
成 内 存 不 足 ; 对 一 个 和 硬件 有 接口 的 模块 测试 时 ,主动 造成 外 部 的 硬件 故障 ,如 显示 设备 故 
障 、 条 形 码 读 码 器 故障 等 。 还 有 ,如 果 被 测 单 元 依赖 数据 库 或 Servlet 引擎 ,那么 就 要 模拟 这 些 
外 部 条 件 产 生 错 误 的 情况 来 做 单元 测试 。 类 似 的 情况 并 不 一 定 要 求 测试 人 员 手 工 来 模拟 ,可 
以 借助 一 些 相 关 的 工具 ,如 各 种 商业 或 开发 的 模拟 器 。 

(5) 分 析 被 测 单元 组 件 接口 。 接 口 是 单 元 和 外 界 进行 数据 交互 的 唯一 通路 ,只 有 在 数据 
通过 接口 能 正确 流入 、 流 出 模块 的 前 提 下 ,其 他 测试 才 有 意义 。 设 计 与 接口 相关 的 测试 用 例 及 
用 例 正确 与 否 应 该 考虑 下 列 因素 : 

。 输入 的 实际 参数 与 形式 参数 的 个 数 是 否 相同 。 

。 输 入 的 实际 参数 与 形式 参数 的 属性 是 否 匹 配 。 

。 输入 的 实际 参数 与 形式 参数 的 量 纲 (参数 的 物理 含义 ) 是 否 一 致 。 

。 调用 其 他 模块 时 所 给 实际 参数 的 个 数 是 否 与 被 调 模块 的 形 参 个 数 相同 。 

。 调用 其 他 模块 时 所 给 实际 参数 的 属性 是 否 与 被 调 模块 的 形 参 属性 匹配 。 

。 调用 其 他 模块 时 所 给 实际 参数 的 量 纲 (参数 的 物理 含义 ) 是 否 与 被 调 模块 的 形 参 量 纲 

一 致 。 

。 调用 预定 义 函数 时 所 用 参数 的 个 数 、 属 性 和 次 序 是 否 正 确 。 

。 是 否 存在 与 当前 入 口 点 无 关 的 参数 引用 。 

。 是 否 修 改 了 只 读 型 参数 。 

。 对 全 局 变量 的 定义 各 模块 是 否 一 致 。 

。 是 否 把 某 些 约束 作为 参数 传递 。 

如 果 模 块 内 包括 外 部 输入 输出 ,还 应 该 考虑 下 列 因素 : 

。 文件 属性 是 否 正确 。 

。 OPEN/CLOSE 语句 是 否 正确 。 

。 格式 说 明 与 输入 输出 语句 是 否 匹 配 。 

。 缓冲 区 大 小 与 记录 长 度 是 否 匹 配 。 

。 文件 使 用 前 是 否 已 经 打开 ,使 用 后 是 否 关闭 。 

。 是 否 处 理 了 文件 尾 。 

。 是 否 处 理 了 输入 输出 错误 。 

。 输出 信息 中 是 否 有 文字 性 错误 。 

(6) 分 析 模 块 内 部 的 数据 结构 。 局 部 数据 结构 往往 是 错误 的 根源 ,对 其 检查 主要 是 为 了 
保证 临时 存储 在 模块 内 的 数据 在 程序 执行 过 程 中 完整 、 正 确 , 因 此 应 仔细 设计 测试 用 例 ,力求 
发 现下 面 几 类 错误 : 

。 被 测 模块 中 是 否 存 在 不 合适 或 不 一 致 的 数据 类 型 说 明 。 

。 被 测 模块 中 是 否 残 留 未 赋值 或 未 初始 化 的 变量 。 

。 被 测 模块 中 是 否 存 在 错误 的 初始 值 或 错误 的 默认 值 。 

。 被 测 模块 中 是 否 有 不 正确 的 变量 名 ( 拼 错 或 不 正确 的 截断 ) 。 


。 被 测 模块 中 是 否 存在 数据 结构 的 不 一 致 。 

。 被 测 模块 中 是 否 会 出 现 上 溢 、 下 溢 和 地 址 异常 。 

除了 局 部 数据 结构 外 ,如 果 可 能 ,单元 测试 时 还 应 该 查 清 全 局 数据 (例如 C 语言 的 缓冲 
区 ) 对 模块 的 影响 。 为 设计 检查 模块 内 部 结构 错误 设计 用 例 服务 。 

(7) 分 析 基 路 径 覆 盖 ,为 基 路 径 覆 盖 设 计 用 例 服务 。 在 第 3 章 的 3. 2 节 中 详细 分 析 了 基 
路 径 覆 盖 ,在 模块 的 单元 测试 中 应 对 基 路 径 中 的 每 一 条 独立 执行 路 径 进 行 覆 盖 测 试 。 

(8) 分 析 其 他 覆盖 ,为 基本 覆盖 设计 用 例 服 务 。 如 分 析 语 句 覆 盖 、 判 定 覆 盖 、 条 件 覆 盖 、 条 
件 组 合 覆 盖 、 循 环 履 盖 ( 常 常 借用 边界 值 分 析 方 法 来 覆盖 循环 ) 。 常 常 能 发 现 的 错误 包括 ， 

。 运算 符 优 先 级 理解 或 使 用 错误 。 

。 混合 类 型 运算 错误 。 

。 变量 初始 化 错误 。 

。 精度 不 够 。 

。 表达 式 符号 错误 。 

。 不 同 数据 类 型 的 对 象 之 间 进 行 比较 。 

。 错误 地 使 用 逻辑 运算 符 或 优先 级 。 

。 因 计 算 机 表示 的 局 限 性 ,期 望 理论 上 相等 而 实际 上 不 相等 的 两 个 量 相等 。 

。 比较 运算 或 变量 出 错 。 

。 循环 终止 条 件 不 可 能 出 现 。 

。 迭代 发 散 时 不 能 退出 。 

。 错误 地 修改 了 循环 变量 。 

(9) 分 析 单 元 出 错 处 理 的 正确 性 ,为 设计 出 错 处 理 用 例 服务 。 一 个 好 的 设计 应 能 预见 各 
种 出 错 条 件 , 并 进行 适当 的 出 错 处 理 , 即 预 设 各 种 出 错 处 理 通 路 。 出 错 处 理 是 模块 功能 的 一 部 
分 ,这 种 带 有 预见 性 的 机 制 保证 了 在 程序 出 错时 对 出 错 部 分 及 时 修补 ,因此 出 错 处 理 通 路 同样 
需要 认真 测试 ,此 类 测试 应 着 重 检 查 下 列 问题 : 
输出 的 出 错 信 息 看 不 懂 , 难 以 理解 。 
。 错误 陈述 中 未 能 提供 足够 的 出 错 定位 信息 。 
显示 错误 与 实际 遇 到 的 错误 不 符 。 

。 异常 处 理 不 得 当 。 

。 在 程序 进行 出 错 处 理 前 ,错误 条 件 已 经 引发 系统 的 干预 。 

2. 单元 测试 用 例 设计 综述 

单元 测试 用 例 的 设计 以 上 节 的 单元 测试 分 析 为 基础 ,一 般 先 设计 逻辑 测试 用 例 , 再 依据 好 
辑 用 例 设计 物理 测试 用 例 ( 物 理 测 试用 例 就 是 在 逻辑 测试 用 例 中 填 入 相关 测试 数据 )。 

在 用 静态 测试 技术 进行 测试 时 ,一 般 不 需要 设计 具体 的 用 例 , 按 照 静态 测试 技术 的 要 求 完 
成 相关 工作 即 可 ,如 对 单元 代码 进行 走 查 代码 时 ,应 该 按照 走 查 的 标准 和 checklist 的 要 求 完 
成 单元 代码 的 走 查 工作 ,但 在 代码 走 查 中 可 能 会 涉及 到 相关 代码 逻辑 合理 性 的 检查 及 代码 和 
详细 设计 的 一 致 性 检查 。 

在 用 黑 盒 测试 方法 设计 单元 测试 用 例 时 .依据 4. 3 节 的 分 析 功 能 点 ,重点 考虑 测试 用 例 至 
少 覆 盖 所 有 最 小 的 功能 点 一 次 。 如 表 4-2 中 的 测试 用 例 覆 盖 了 ATM 取款 这 个 单元 组 件 的 功 
能 点 有 : 

(1) 正常 取款 ; 


(2) 输入 的 取款 金额 是 否 合法 ; 

(3) 检查 超出 当天 的 最 大 取款 (假设 为 2000RMB) ; 

(4) 余额 不 足 ( 假 设 账号 余额 为 1500RMB); 

(5) 打印 收据 功能 点 至 少 一 次 。 测 试 的 前 提 是 银行 卡 和 密码 为 有 效 。 


表 4-2 单元 最 小 功能 点 覆盖 实例 


用 例 编 号 ls 预期 输出 覆盖 功能 说 明 
银行 卡号 卡 密码 取款 金额 
001 111-8888( 有 效 ) | 654321( 正 确 ) 500 正常 取款 ,打印 收据 (CD) (5) 
002 111-8888( 有 效 ) | 654321( 正 确 ) 005 取款 金额 不 合法 (2) 
003 111-8888( 有 效 ) | 654321( 正 确 ) 2500 超出 当天 最 大 取款 3 
004 111-8888( 有 效 ) | 654321( 正 确 ) 1800 账户 余额 不 足 (4) 


单元 测试 的 非 功能 性 测试 一 般 是 通过 黑 盒 测试 实现 特定 的 功能 来 达到 测试 的 目的 。 如 排 
序 算 法 的 有 效 性 的 测试 是 通过 完成 排序 功能 来 实现 的 ,只 不 过 在 测试 用 例 的 设计 要 考虑 不 同 
复杂 程度 的 测试 数据 ,测试 结果 的 分 析 涉 及 排序 的 时 间 ,排序 的 数据 量 等 。 

边界 值 分 析 是 黑 盒 测试 的 经 典 方法 ,一 般 的 用 例 设计 都 会 采用 ,具体 设计 方法 参考 第 3 章 
的 3.1.1 节 。 这 里 举 个 例子 ,如 银行 系统 规定 在 每 次 的 ATM 交易 中 ,密码 输入 错误 次 数 不 能 
超过 5 次 ,意思 是 N 小 于 等 于 5 时 是 不 香 卡 的 ,N 为 每 次 的 ATM 交易 时 密码 输入 错误 次 数 。 
利用 边界 值 方法 可 以 设计 表 4-3 所 示 的 测试 用 例 。 


表 4-3 用 边界 值 法 设计 用 例 列举 


输 入 
用 例 编号 预期 输出 说 明 
银行 卡号 卡 密码 取款 金额 
001 111-8888( 有 效 ) | 654321( 正 确 ) 0 取款 额 不 能 为 0 “| 测试 零 边界 
123456( 连 续 错 2 次 ， 测试 密码 错误 次 
002 111-8888( 有 效 ) 第 三 次 正确 ) 200 正常 取款 数 没 超出 边界 
123456( 连 续 错 5 次 ， 测试 密码 错误 次 
003 111-8888( 有 效 ) 第 6 次 正确 ) 1000 正常 取款 数 的 边界 极限 
测试 密码 错误 次 
004 111-8888( 有 效 ) | 123456( 连 续 错 6 次 ) 1000 吞 卡 数 超出 边界 极限 


可 以 根据 单元 测试 分 析 中 提 及 的 “强制 一 些 错误 情况 发 生 ” 通 过 黑 盒 来 设计 测试 用 例 , 如 
ATM 系统 中 主动 造成 磁盘 空间 不 足 、 主 动 造成 内 存 不 足 情况 的 测试 用 例 。 表 4-4 为 系统 产生 
报表 后 存储 空间 不 足 的 用 例 。 

另外 ,单元 的 接口 覆盖 测试 也 是 采用 单元 黑 盒 功能 来 实现 ,其 目的 就 是 通过 设计 一 定 的 测 
试用 例 使 单元 的 接口 都 被 覆盖 到 。 

总 之 ,在 使 用 黑 盒 技术 设计 测试 用 例 时 应 该 多 方面 考虑 ,用 例 的 设计 至 少 应 该 考虑 以 下 
方面 : 

。 测试 程序 单元 的 所 有 最 小 功能 点 是 否 覆 盖 。 


表 4-4 强制 错误 用 例 列 举 


用 例 编号 预期 输出 说 明 
支局 号 报表 类 型 报表 日 期 跨度 
报表 产生 后 放 于 本 地 
系统 中 ,假设 本 地 系统 
001 000234 交易 明细 7 天 eb 只 有 500MB 可 用 空 
间 , 而 7 天 的 交易 明细 
有 700MB 


。 测试 程序 单元 非 功 能 性 是 否 满足 要 求 , 如 安全 性 、 可 靠 性 、 强 度 (压力 ) 测 试 (可 选 )。 

。 考虑 可 选 的 其 他 测试 特性 ,如 接口 .边界 \ 余 量 、 强 制 性 出 错 、 人 机 交互 界面 测试 等 。 

前 面 曾 提 及 ,单元 测试 用 例 的 设计 既 可 以 使 用 白 盒 测试 方法 也 可 以 使 用 黑 盒 测试 方法 ,但 
以 白 盒 测试 为 主 , 黑 盒 测 试 侧重 于 功能 , 白 盒 测试 侧重 于 逮 辑 。 白 盒 测试 进入 单元 测试 的 前 提 
条 件 是 测试 人 员 已 经 对 被 测试 对 象 有 了 一 定 的 了 解 ,基本 上 明确 了 被 测试 软件 的 好 辑 结构 。 
具体 过 程 就 是 针对 程序 逻辑 结构 设计 加 载 测 试用 例 , 驱 动 程序 执行 ,检查 在 不 同 点 程序 的 状 
态 , 以 确定 实际 的 状态 是 否 与 预期 的 状态 一 致 。 一 般 来 说 ,为 了 度量 测试 的 完整 性 , 白 盒 测试 
通常 也 要 求 达 到 一 定 的 覆盖 率 。 因 为 通过 覆盖 率 的 统计 可 以 知道 测试 是 否 充分 ,对 软件 的 哪 
个 部 分 所 做 的 测试 不 够 ,可 以 指导 我 们 如 何 设 计 增 加 覆盖 率 的 测试 用 例 。 这 样 就 能 够 提高 测 
试 质量 ,尽量 避免 设计 无 效 的 用 例 。 在 白 盒 测试 的 范畴 内 通常 使 用 下 面 几 种 测试 覆盖 率 来 度 
量 测试 ,如 语句 覆盖 、 判 定 覆 盖 、 条 件 覆 盖 、 判 定 条 件 覆 盖 、 条 件 组 合 覆 盖 .路 径 材 盖 等 。 白 盒 测 
试 最 低 应 该 达到 的 覆盖 率 目 标 是 ; 语句 覆盖 率 达 到 100%% ,分支 覆盖 率 达 到 100% ,覆盖 程序 
中 主要 的 路 径 , 主 要 路 径 是 指 完成 模块 正常 功能 的 路 径 和 其 他 异常 处 理 执行 的 路 径 。 测 试 人 
员 在 实际 工作 中 要 根据 不 同 的 覆盖 要 求 用 白 盒 方 法 来 设计 面向 代码 的 单元 测试 用 例 ,运行 测 
试用 例 后 至 少 应 该 同时 满足 如 下 几 个 覆盖 : 

。 对 程序 模块 的 所 有 独立 的 执行 路 径 至 少 覆 盖 一 次 ,达到 基 路 径 材 盖 , 即 McCabe 覆盖 。 

。 对 所 有 的 逻辑 判定 , 真 假 两 种 情况 都 至 少 覆 盖 一 次 。 

。 在 循环 的 边界 和 界限 内 执行 循环 体 , 即 用 边界 值 的 方法 来 测试 循环 体 。 

。 测试 内 部 数据 结构 的 有 效 性 等 。 

白 盒 测试 用 例 的 具体 设计 方法 参考 本 书 第 3 章 的 3.2 节 。 


4.5 单元 测试 实例 


这 里 以 “酒店 服务 与 管理 ”系统 中 的 package FlashRemoting( 看 成 模块 ) 为 例 来 分 析 单 元 测 
试 。 在 package FlashRemoting 中 包含 有 FindPassWord. java、HotelLogin. java 和 MemberManage. 
java 三 个 类 。 


1. 系统 大 概 需求 


1. 项 目 概述 

圣保罗 酒店 管理 系统 为 酒店 管理 活动 提供 了 一 个 方便 的 电子 平台 。 该 系统 分 前 台 会 员 
预订 房间 部 分 和 后 台 系 统管 理 部 分 。 管 理 员 通 过 后 台 管 理 系统 将 房间 信息 发 布 在 网 上 ,并 
对 整个 房间 预订 流程 进行 有 效 的 控制 ,管理 和 统计 ; 消费 者 通过 系统 前 台 部 分 方便 快捷 地 


进行 酒店 信息 浏览 以 及 房间 的 预订 ,享受 酒店 提供 的 各 种 服务 。 


2. 项 目 范围 


圣保罗 酒店 管理 系统 适用 于 各 色 酒 店 ,前 台 管 理 包括 预定 房间 及 退 订 、 酒 水 服务 等 ,后 
台 管 理 包 括 会 员 管理 等 。 除 此 之 外 ,该 管理 系统 也 同样 适用 于 非 酒店 但 有 同样 需求 的 行业 ， 
比如 旅行 社 的 服务 预定 与 退 订 等 。 


3. 功能 简 述 


用 户 可 以 进行 注册 会 员 操作 ,使 用 会 员 身份 登录 后 可 以 修改 个 人 资料 ,浏览 酒店 信息 、 
查看 餐 单 .预订 房间 和 进行 用 户 反馈 。 管 理 员 在 登录 以 后 可 以 进行 相关 管理 操作 ,包括 查看 
订单 信息 、 查 看 客房 信息 .发布 预订 信息 、 管 理 预订 信息 、 生 成 报表 管理 会 员 信息 和 反馈 用 


户 建 议 等 。 


2. Package FlashRemoting 模块 测试 函数 (方法 ) 参 考 表 


标识 符 名 称 代码 行 (LOC) 

Boolean LoginAdmin (String userName, String userPassword, String 

LLD _001_FUN_001 49 
Private_Key) 

LLD_001 FUN_002 | boolean LoginUser(String userName,String userPassword) 43 
String loginFMS ( String userName，String userPassword, String 

LLD_001_FUN_003 | ~， 69 
Private_Key) 
String newUser(String firstName, String lastName, String passWord, 

LLD_001_FUN_004 . Ns 106 
String eMail, String salutation) 

LLD 001_FUN _005 String We ‘ Sie ee Seg Masta String 101 
passWord, String eMail, String salutation, String Private_Key) 

LLD_001_FUN._006 |boolean RepassWord(String User_ID) 46 

LLD_001_FUN._007 | boolean emailFormat(String email) 12 

LLD _001_FUN_008 |int CheckSet(int Set) 15 


3. 采用 测试 方法 


。 保证 所 有 的 语句 、 分 支 被 覆盖 ; 


。 参考 等 价 类 划分 方法 ; 
。 参考 边界 值 分 析 方 法 ; 


。 参考 使 用 错误 猜测 方法 ; 


。 测试 脚本 使 用 Java 语 
系统 ; 


4. 测试 环境 

(1) 硬件 需求 : 

两 台 标准 开发 PC。 
(2) 软件 需求 : 


吾 


实现 ,并 且 和 驱动 (Drive) 代 码 、 桩 (Stub) 代 码 构成 一 个 可 执行 


覆盖 率 分 析 使 用 Logicscope 工具 ; 
某 函 数 的 缺陷 被 修正 后 必须 回归 与 该 函数 相关 的 所 有 单元 测试 用 例 。 


。 两 套 Windows NT 操作 系统 ; 
。 两 套 MyEclipse 7. 5 开发 环境 ; 


两 套 tomcat 服务 器 ; 

一 套 Flash CS4; 

。 一 套 Flash Media Server; 

。 两 套 Java SDK 6.0; 

。 一 套 SQL Server 2005; 

。 两 套 Microsoft Office 2007 。 

5. 测试 对 象 

Package FlashRemoting tag_02 版 本 。 

6. 用 例 分 析 与 设计 

1) LoginAdmin 测试 分 析 与 设计 

(1) 标识 符 定义 : UT_TD_001_001。 

(2) 被 测 特性 。 

。 输入 管理 员 账 户 不 存在 时 ,登录 失败 ; 

。 输 入 管理 员 账 户 与 密码 不 匹配 时 ,登录 失败 ; 
。 输入 管理 员 登 录 密 钥 错 误 时 ,登录 失败 ; 
。 输入 参数 任意 为 空 时 ,登录 失败 ; 

。 输入 参数 合法 时 ,登录 成 功 。 


(3) 测试 方法 。 
管理 员 账 户 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 对 于 非 空 情况 ,又 可 以 划分 为 数据 库 
中 存在 和 不 存在 两 种 情况 。 
密码 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 对 于 非 空 情况 ,又 可 以 划分 为 与 管理 员 账 户 
匹配 与 不 匹配 两 种 情况 。 
密 钥 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 对 于 非 空 情况 ,又 可 以 划分 为 正确 和 不 正确 
两 种 情况 。 
(4) 测试 项 标识 。 
测试 项 标识 符 测试 项 描述 优先 级 
UT_TC_001_001_001 输入 参数 任意 为 空 的 情况 低 
UT_TC 001 001 002 输入 管理 员 登录 密 钥 错误 的 情况 高 
UT_TC_001_001_003 输入 管理 员 账户 与 密码 不 匹配 的 情况 高 
UT_TC_001_001_004 输入 管理 员 账 户 不 存在 的 情况 中 
UT_TC_001_001_005 输入 参数 合法 的 情况 高 


(5) 测试 通过 \ 失 败 标准 。 
所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 
(6) 对 应 用 例 : 


测试 项 编号 UT_TC _001_001_001 

优先 级 低 

测试 项 描述 测试 参数 任意 为 空 情况 的 错误 情况 

前 置 条 件 网 站 管理 员 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 


续 表 
用 例 序 号 输入 期 望 结 果 
userName=" HA00000000001" 返回 false 
001 userPassword 二 "" 反馈 密码 不 能 为 空 的 错误 
Private_Key=" genocide" 信息 
userName="" 返回 false 
002 userPassword 一 ”992125gjl” 反馈 用 户 名 不 能 为 空 的 错误 
Private_Key 一 ”genocidc" 信息 
userName= "HA00000000001" 返回 false 
003 userPassword 一 “992125gjl” 反馈 密 钥 不 能 为 空 的 错误 
Private Key 一"" 信息 
测试 项 编号 UT_TC_001_001_002 
优先 级 高 
测试 项 描述 测试 管理 员 登 录 密 钥 的 错误 情况 
前 置 条 件 网 站 管理 员 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 
用 例 序号 输入 期 望 结果 
userName=" HA00000000001" 
001 userPassword 一 ”992125gjl” 网 全 
A 反馈 密 钥 错误 的 错误 信息 
Private_Key=" genocidc 
测试 项 编号 UT_TC_001_001_003 
优先 级 中 
测试 项 描述 测试 管理 员 账 户 不 存在 的 错误 情况 
前 置 条 件 网 站 管理 员 单 击 “登录 ”按钮 ,进入 登录 界面 
用 例 序号 输入 期 望 结果 
userName=" HA00000000011”" 返回 false 
001 userPassword 一 ”992125gjl” 反馈 不 存在 该 管理 员 的 错误 
了 Private_Key 一 ”genocide” 信息 
测试 项 编号 UT_TC 001 001 004 
优先 级 高 
测试 项 描述 测试 管理 员 账 户 与 密码 不 匹配 的 错误 情况 
前 置 条 件 网 站 管理 员 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 
用 例 序 号 输入 期 望 结果 
userName=" HA00000000001" m 
001 userPassword=" 992125gll" nbs 
: i 反馈 密码 错误 的 错误 信息 
Private Key 一 ”genocide 
测试 项 编号 UT_TC _001_001_005 
优先 级 高 
测试 项 描述 测试 参数 合法 的 情况 
前 置 条 件 网 站 管理 员 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 
用 例 序 号 输入 期 望 结果 
userName=" HA00000000001” 返回 true 
001 userPassword 一 ”992125gjl” Logined= true 
Private_Key=" genocide" 更 新 最 后 登录 时 间 


2) LoginUser 测试 分 析 与 设计 
(1) 标识 符 定义 : UT_TD_001_002。 


(2) 被 测 特 性 。 


。 输入 用 户 账户 不 存在 时 ,登录 失败 ; 

。 输入 用 户 账户 与 密码 不 匹配 时 ,登录 失败 ; 
。 输入 参数 任意 为 空 时 ,登录 失败 ; 

。 输入 参数 合法 时 ,登录 成 功 。 


(3) 测试 方法 。 
用 户 账户 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 对 于 非 空 情况 ,又 可 以 划分 为 数据 库 中 
存在 和 不 存在 两 种 情况 。 
密码 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 对 于 非 空 情况 ,又 可 以 划分 为 与 用 户 账户 匹 
配 与 不 匹配 两 种 情况 。 
(4) 测试 项 标识 。 
测试 项 标识 符 测试 项 描述 优先 级 
UT_TC_001_002_001 输入 参数 任意 为 空 的 情况 低 
UT_TC _001_002_002 输入 用 户 账户 与 密码 不 匹配 的 情况 高 
UT_TC_001_002_003 输入 用 户 账户 不 存在 的 情况 中 
UT_TC_001_002_004 输入 参数 合法 的 情况 高 
(5) 测试 通过 \ 失 败 标准 。 
所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 
(6) 对 应 用 例 : 
测试 项 编号 UT_TC_001_002_001 
优先 级 低 
测试 项 描述 测试 参数 任意 为 空 的 错误 情况 
前 置 条 件 网 站 用 户 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 
用 例 序号 输入 期 望 结果 
abi userName="" 返回 false 
userPassword 一 ”123412s3d32" 反馈 用 户 名 不 能 为 空 的 错误 信息 
002 userName=" HM0010030204" 返回 false 
userPassword 一 "" 反馈 密码 不 能 为 空 的 错误 信息 
测试 项 编号 UT_TC_001_002_002 
优先 级 高 
测试 项 描述 测试 用 户 账户 与 密码 不 匹配 的 错误 情况 
前 置 条 件 网 站 用 户 单 击 “登录 ”按钮 ,进入 登录 界面 
用 例 序号 输入 期 望 结果 
userName=" HM0010030204" 返回 false 


001 


userPassword 一 ”123412s3d32” 


反馈 密码 错误 的 错误 信息 


测试 项 编号 UT_TC 001 002_003 

优先 级 中 

测试 项 描述 测试 用 户 账 户 不 存在 的 错误 情况 

前 置 条 件 网 站 用 户 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 

用 例 序号 输入 期 望 结果 
userName=" HM0000000001" 返回 false 

oy userPassword 一 ”123412s3d32” 反馈 不 存在 该 用 户 的 错误 信息 

测试 项 编号 UT_TC 001_002_004 

优先 级 高 

测试 项 描述 测试 参数 合法 的 情况 

前 置 条 件 网 站 用 户 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 

用 例 序号 输入 期 望 结果 

m 返回 true 

001 ee d 0 Logined= true 

userPassword 一 ej 更 新 最 后 登录 时 间 


3) newAdmin 测试 分 析 与 设计 
(1) 标识 符 定 义 : UT_TD_001_005。 


(2) 被 测 特性 。 


。 输入 管理 员 邮 箱 不 合法 时 ,注册 失败 ; 
。 输入 特定 参数 为 空 时 ,注册 失败 ; 
。 输入 参数 合法 时 ,注册 成 功 。 


(3) 测试 方法 。 


管理 员 first name 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 


密码 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 

密 钥 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 
邮箱 参数 的 等 价 类 划分 考虑 合法 和 不 合法 情况 。 
(4) 测试 项 标识 。 


测试 项 标识 符 测试 项 描述 优先 级 
UT_TC_001_005_001 输入 特定 参数 为 空 的 情况 低 
UT_TC_001_005_002 输入 邮箱 参数 不 合法 的 情况 高 
UT_TC_001_005_003 输入 参数 合法 的 情况 高 


(5) 测试 通过 \ 失 败 标准 。 
所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 


(6) 对 应 用 例 : 


测试 项 编号 UT_TC 001_005_001 
优先 级 低 
测试 项 描述 测试 特定 参数 为 空 的 错误 情况 


续 表 
前 置 条 件 管理 员 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 
用 例 序 号 输入 期 望 结果 
firstName=" Claude" 
lastName= "Strife” 
Password="" 返回 false 
ns eMail=— "zacks_mail163. com" 反馈 密码 不 能 为 空 的 错误 信息 
saluation 二 "先生 " 
Pivate_Key= "genocide" 
firstName="" 
lastName= "Strife” 返回 false 
Password= "992125gjl" 反馈 firstname 不 能 为 空 的 错误 
002 
eMail= "zacks_maill63. com" 信息 
saluation 一 "先生 " 
Pivate_Key 一 "genocide" 
firstName 一 ”Claude" 
lastName= "Strife” 
Bs Password=" 992125gjl” 返回 false 
eMail= "zacks_maill63. com" 反馈 密 钥 不 能 为 空 的 错误 信息 
saluation 一 "先生 ” 
Pivate_Key="" 
测试 项 编号 UT_TC_001_005_002 
优先 级 高 
测试 项 描述 测试 邮箱 参数 不 合法 的 错误 情况 
前 置 条 件 管理 员 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 
用 例 序 号 输入 期 望 结果 
firstName 一 ”Claude" 
lastName= "Strife" 
G0 Password 一 ”992125gjl" 返回 false 
eMail= "zacks_maill63. com" 反馈 邮箱 错误 的 错误 信息 
saluation 二 "先生 " 
Pivate_Key= "genocide" 
测试 项 编号 UT_TC_001_005_003 
优先 级 高 
测试 项 描述 测试 参数 合法 的 情况 
前 置 条 件 管理 员 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 
用 例 序 号 输入 期 望 结果 
firstName=" Claude" 
lastName= "Strife" 
ii Password 一 ”992125gjl 返回 User_ ID 


eMail= "zacks_mail@163. com” 
saluation 一 "先生 " 


Pivate_Key= "genocide" 


4) newUser 测试 分 析 与 设计 

(1) 标识 符 定义 : UT_TD_001_004。 
(2) 被 测 特 性 。 

。 输入 用 户 邮 箱 不 合法 时 ,注册 失败 ; 
。 输入 特定 参数 为 空 时 ,注册 失败 ; 
。 输入 参数 合法 时 ,注册 成 功 

(3) 测试 方法 。 


用 户 first name 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 


密码 参数 的 等 价 类 划分 考虑 空 和 非 空 情况 。 


邮箱 参数 的 等 价 类 划分 考虑 合法 和 不 合法 情况 。 


(4) 测试 项 标识 。 


测试 项 标识 符 测试 项 描述 优先 级 
UT_TC _001_004_001 输入 特定 参数 为 空 的 情况 低 
UT_TC_001_004_002 输入 邮箱 参数 不 合法 的 情况 高 
UT_TC_001_004_003 输入 参数 合法 的 情况 高 
(5) 测试 通过 \ 失 败 标准 。 
所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 
(6) 对 应 用 例 : 
测试 项 编号 UT_TC_001_004_001 
优先 级 低 
测试 项 描述 测试 特定 参数 为 空 的 错误 情况 
前 置 条 件 网 站 用 户 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 
用 例 序 号 输入 期 望 结果 
firstName=" Claude" 
lastName 一 "Strife" 返回 false 
001 Password 一 "" 反馈 密码 不 能 为 空 的 错误 
eMail= "zacks_maill63. com" 信息 
saluation 一 "先生 ” 
firstName="" 
lastName= "Strife" 返回 false 
002 Password= "992125gjl” 反馈 firstname 不 能 为 空 的 
eMail= "zacks_maill63. com" 错误 信息 
saluation 一 "先生 " 
测试 项 编号 UT_TC 001_004_002 
优先 级 高 
测试 项 描述 测试 邮箱 参数 不 合法 的 错误 情况 
前 置 条 件 网 站 用 户 单 击 “注册 ”按钮 ,进入 注册 界面 


续 表 

用 例 序号 输入 期 望 结 果 
firstName 一 ”Claude" 
lastName 一 "Strife" 

001 Password=" 992125gjl" se ee 
eMail= "zacks_maill63. com" 反馈 邮箱 错误 的 错误 信息 
saluation 一 "先生 " 

测试 项 编号 UT_TC 001_004_003 

优先 级 高 

测试 项 描述 测试 参数 合法 的 情况 

前 置 条 件 网 站 用 户 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 

用 例 序号 输入 期 望 结果 
firstName 一 ”Claude” 
lastName 一 "Strife" 返回 User ID 

001 了 Password 一 ”992125gjl” 加 
eMail= "zacks_mail@163. com" 
saluation 一 "先生 " 

5) emailFormat 测试 分 析 与 设计 

(1) 标识 符 定义 : UT_TD_001_007。 

(2) 被 测 特 性 。 

输入 邮箱 不 合法 时 ,返回 出 错 信息 。 

(3) 测试 方法 。 

邮箱 参数 的 等 价 类 划分 考虑 合法 和 不 合法 情况 。 

(4) 测试 项 标识 。 

测试 项 标识 符 测试 项 描述 优先 级 

UT_TC _001_007_001 输入 邮箱 参数 不 合法 的 情况 高 
UT_TC_001_007_002 输入 参数 合法 的 情况 高 

(5) 测试 通过 \ 失 败 标准 。 

所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 

(6) 对 应 用 例 : 

测试 项 编号 UT_TC 001 007_001 

优先 级 高 

测试 项 描述 测试 邮箱 参数 不 合法 的 错误 情况 

前 置 条 件 需要 填写 邮箱 地 址 或 需要 向 邮箱 发 送 消息 

用 例 序号 输入 期 望 结 果 

i email= "zacks_maill63. com" 返回 false 

反馈 邮箱 错误 的 错误 信息 
002 email= "zacks_mail@ yahoo. com. cn" 返回 true 


测试 项 编号 UT_TC 001 007_002 

优先 级 高 

测试 项 描述 测试 邮箱 参数 合法 的 情况 

前 置 条 件 需要 填写 邮箱 地 址 或 需要 向 邮箱 发 送 消息 

用 例 序号 输入 期 望 结果 
001 email= "zacks_mail@163. com" 返回 true 


6) RepassWord 测试 分 析 与 设计 


(1) 标识 符 定义 
(2) 被 测 特 性 。 


: UT_TD_001_006。 


。 输入 账户 不 存在 时 , 找 回 密码 失败 ; 
。 输入 参数 为 空 时 , 找 回 密 码 失败 ; 
。 输入 账户 存在 时 , 找 回 密码 成 功 (发 送 密码 至 注册 邮箱 ) 。 


(3) 测试 方法 。 
账户 参数 的 等 价 类 划分 考虑 空 和 非 空 情 况 。 对 于 非 空 情 况 , 又 可 以 划分 为 账户 存在 和 不 
存在 情况 。 
(4) 测试 项 标识 。 
测试 项 标识 符 测试 项 描述 优先 级 
UT_TC_001_006_001 输入 账户 参数 为 空 的 情况 低 
UT_TC_001_006_002 输入 账户 参数 不 存在 的 情况 中 
UT_TC_001_006_003 输入 账户 参数 存在 的 情况 高 
(5) 测试 通过 \ 失 败 标准 。 
所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 
(6) 对 应 用 例 : 
测试 项 编号 UT_TC_001_006_001 
优先 级 低 
测试 项 描述 测试 账户 参数 为 空 的 错误 情况 
前 置 条 件 网 站 使 用 者 单 击 “ 找 回 密码 ”按钮 
用 例 序号 输入 期 望 结果 
i User_ID=" " 返回 false 
反馈 账户 参数 不 能 为 空 的 错误 信息 
测试 项 编号 UT_TC 001_006_002 
优先 级 中 
测试 项 描述 测试 账户 参数 不 存在 的 情况 
前 置 条 件 网 站 使 用 者 单 击 “ 找 回 密码 ”按钮 
用 例 序号 输入 期 望 结果 
od User_ID=" HM0000000101" 返回 false 
反馈 账户 参数 不 存在 的 错误 信息 


测试 项 编号 UT_TC_001_006_003 

优先 级 高 

测试 项 描述 测试 账户 参数 存在 的 情况 

前 置 条 件 网 站 使 用 者 单 击 “ 找 回 密码 ”按钮 

用 例 序 号 输入 期 望 结果 
001 User_ID=" HM0000000001" 返回 true 


7) CheckSet 测试 分 析 与 设计 
(1) 标识 符 定义 : UT_TD_001_008。 


(2) 被 测 特 性 。 


。 当 输 入 参数 为 [0,9999999999] 范 围 内 的 整数 时 ,能 够 检测 数字 的 位 数 ,输出 被 测 数字 


的 位 数 ; 


。 当 输 入 参数 为 大 于 等 于 10000000000 的 整数 时 ,输出 提示 信息 : 已 超出 酒店 的 最 多 用 


户 注册 容量 ; 


。 当 输入 参数 为 负 整数 时 ,输出 0。 


(3) 测试 方法 。 


输入 参数 按照 参数 类 型 划分 为 负 整数 和 非 负 整 数 两 种 情况 。 非 负 整数 按照 范围 划分 为 在 
0 一 9999999999 之 间 和 大 于 等 于 10000000000 两 种 情况 。 
(4) 测试 项 标识 。 


测试 项 标识 符 测试 项 描述 优先 级 
UT_TC_001_008_001 输入 参数 为 0 一 9999999999 之 间 的 整数 的 情况 高 
UT_TC_001_008_002 输入 参数 为 大 于 等 于 10000000000 的 整数 的 情况 高 
UT_TC_001_008_003 输入 参数 为 负 整数 的 情况 高 


(5) 测试 通过 \ 失 败 标 准 。 
所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 


(6) 对 应 用 例 : 


测试 项 编号 UT_TC _001_008_001 

优先 级 高 

测试 项 描述 输入 参数 为 0 一 9999999999 的 整数 的 情况 

前 置 条 件 无 

用 例 序号 输入 期 望 结 果 
001 set 一 0 返回 1 
002 set 一 1 返回 1 
003 set 一 123 返回 3 
004 Set 一 9999999990 返回 10 
005 Set 一 9999999999 返回 10 


测试 项 编号 UT_TC 001 008_002 
优先 级 高 
测试 项 描述 输入 参数 为 大 于 等 于 10000000000 的 整数 的 情况 
前 置 条 件 无 
用 例 序号 输入 期 望 结果 
显示 提示 信息 : 已 超出 酒店 

001 set=10000000000 的 明 记 用 六 注册 兴 开 
测试 项 编号 UT_TC 001_008_003 
优先 级 高 
测试 项 描述 输入 参数 为 负 整数 的 情况 
前 置 条 件 无 
用 例 序号 输入 期 望 结 果 
001 set 一 一 1 返回 0 

7. 测试 脚本 


脚本 以 管理 员 登 录 为 例 , 被 测 源 代 码 为 AdminLoginSRC. java、 测 试用 例 脚 本 为 
AdminLogin_UnitTest. java、 驱 动 器 为 AdminLogin_drive. java、 桩 为 Crypt_stub. java。 被 测 
源 代码 AdminLoginSRC. java 中 需要 调用 crypt 类 中 的 decode 函数 ,因此 设计 一 个 和 被 调用 
函数 名 称 相同 的 桩 (stub) 来 模拟 被 调用 函数 。 这 个 桩 本 身 不 执行 任何 功能 , 仅 在 被 调用 时 返 
回 静 态 值 来 模拟 被 调用 函数 的 行为 。 对 于 打桩 了 的 函数 ,在 测试 时 不 考虑 其 内 部 他 辑 是 如 何 
处 理 的 , 仅 检测 其 接受 的 参数 是 否 合法 ,并 根据 用 例 需 要 设 定 其 输出 参数 .返回 值 或 全 局 变量 。 

驱动 器 AdminLogin_drive. java 将 自动 化 地 调用 执行 AdminLogin_UnitTest. java 中 的 
所 有 测试 用 例 , 并 得 到 测试 用 例 正确 执行 与 否 的 结果 。 了 驱动 器 使 得 测试 不 必 与 用 户 界面 真正 
交互 。 下 面 给 出 部 分 代码 ,其 他 代码 从 略 。 

AdminLoginSRC. java 的 代码 如 下 : 


package FlashRemoting; 


import java. sql. *; 

import java. util. Date; 
import java. io. Serializable; 
import javax. sql. *; 

import javax. naming. yx ; 
import java. io. *; 


public class HotelLogin implements Serializable 
{ 
public static boolean LoginAdmin( String userName, String userPassword, String Private_Key) 
{ 
String sql = "SELECT Rdmin PassWord FROM Admin List WHERE Admin_ID= ?"; 
PreparedStatement stmt = null; 
Connection connection = null; 
ResultSet rs = null; 
try 
{ 
Context ctx = (Context)new InitialContext(). lookup("java:comp/env"); 
DataSource ds = (DataSource)ctx. lookup("Main Database"); 


connection = ds.getConnection(); 
stmt = connection. prepareStatement(sql); 
stmt. setString(1, userName); 
byte[ ] key = Private Key. getBytes(); 
rs = stmt. executeQuery(); 
logined = false; 
while(rs. next()) 
{ 
byte[ ] results = rs.getBytes("Admin PassWord"); 


if(userPassword. compareTb ( (new String(EncodePassword. Crypt_Stub. decode( (results), key)))) == 0) 


{ 
Date Checkin = new Date(); 


Timestamp checkin = new Timestamp (Checkin. getTime()); 
sql = "Update Admin List set Last LoginTime = '" + checkin + "'Where Admin ID= "+ userName +""; 


stmt = connection. prepareStatement(sql); 
stmt. executeUpdate( ) ; 
logined = true; 


} 
catch(Exception e) 


{ 
System. out. println(e); 
} 
finally 
{ 
try 
{ 


rs.close(); 
connection. close( ); 
stmt. close( ); 
} 
catch(Exception e) 
{ 
} 
} 
return logined; 


} 
AdminLogin_UnitTest. java 的 代码 如 下 : 
package FlashRemoting; 

import junit. framework. TestCase; 


public class Login UnitTest extends TestCase 
{ 
public static String CASE_NUM; 
public static boolean UT_TC 001 001 005 001 () 
{ 
CASE NUM = "UT TC 001 001 005 001"; 
boolean CASE SUC = false; 
证 ( HotelLogin. LoginAdmin ( " HA0000000001", " 992125gj1", 
EncodePassword. Crypt_stub. STUB_SUC == true) 
{ 


" genocide ") 


CASE SUC = true; 
} 
return CASE_SUC; 
} 
public static boolean UT TC 001 001 003 001() 
{ 
CASE NUM = "UT TC 001 001 003 001"; 
boolean CASE SUC = false; 
if ( HotelLogin. LoginAdmin ( " HA0000000011", " 992125gjl", " genocide") = = false && 
EncodePassword. Crypt_stub. STUB_SUC == true) 
{ 
CASE SUC = true; 
} 
return CASE_SUC; 
' 
public static boolean UT_TC _001 001 004_001() 
{ 
CASE_NUM = "UT TC 001 001_004_001"; 
boolean CASE_SUC = false; 
if(HotelLogin. LoginAdmin ( " HA00000000001", "992125g11"， " genocide") == false && 
EncodePassword. Crypt_stub. STUB_SUC == true) 
{ 
CASE SUC = true; 
} 
return CASE_SUC; 
} 
public static boolean UT_TC 001 001 002 001() 
{ 
CASE NUM = "UT TC 001 001 002 001"; 
boolean CASE SUC = false; 
if(HotelLogin. LoginAdmin ( " HA00000000001", " 992125gjl", " genocidc") == false && 
EncodePassword. Crypt_stub. STUB_SUC true) 
' 


CASE SUC = true; 
} 
return CASE_SUC; 
} 
public static boolean UT_TC_001_001_001_001() 
{ 
CASE_NUM = "UT_TC 001_001_001_001"; 
boolean CASE_ SUC = false; 
if (HotelLogin. LoginAdmin ( " HA00000000001", "", "genocidc") == false && EncodePassword. Crypt_ 
stub. STUB_SUC == true) 
{ 
CASE SUC = true; 
} 
return CASE_SUC; 
} 
public static boolean UT TC 001 001 001 002() 
{ 
CASE NUM = "UT TC 001 001 001 002"; 
boolean CASE SUC = false; 
if(HotelLogin. LoginAdmin( "", "992125gjl", "genocidc") == false && EncodePassword. Crypt_ 
stub. STUB_SUC == true) 
{ 


CASE SUC = true; 


} 

return CASE_SUC; 
} 
public static boolean UT TC 001 001 001 003() 
{ 


CASE NUM = "UT TC 001 001 001 003"; 
boolean CASE SUC = false; 
if (HotelLogin. LoginAdmin( " HA00000000001", "992125gjl", "") == false && EncodePassword. 

Crypt_stub. STUB_SUC == true) 

t 

CASE SUC = true; 
} 
return CASE_SUC; 


} 
AdminLogin_drive. java 的 代码 如 下 : 


package FlashRemoting; 


public class Login Drive{ 

private static boolean UT TC 001 001 001 001 = false; 
private static boolean UT TC 001 001 001 002 = false; 
private static boolean UT TC 001_001 001_ 003 = false; 
private static boolean UT _TC 001 _001 002 001 = false; 
private static boolean UT TC 001 001 003 001 = false; 
private static boolean UT TC 001 001 004 001 = false; 
private static boolean UT _TC 001_001 005 001 = false; 
public static void main(String[ ] args) { 


if(UT_TC_001 001 001 001()) 
. UT_TC_001 001_001_001 = true; 
ed it )) 
| UT_TC 001_001_001_002 = true; 
2000 oi vedat )) 
UT_TC_001 001_001_003 = true; 
A )) 
! UT_TC_001_001 002_001 = true; 
0 ()) 


{ 
UT_TC 001_001 003_001 = true; 
} 
if(UT_TC 001 001 004 001()) 
UT_TC_001_001 004 001= true; 
} 


if(UT_TC 001 001 005 001()) 


UT_TC 001 001 005 001 = true; 
} 

Crypt_stub. java 的 代码 如 下 : 

package EncodePassword; 


import java. security. *; 
import javax.crypto. *; 


public class Crypt_stub 


{ 
public static boolean STUB SUC = true; 


// 解 密 
public static byte[ ] decode(byte[ ] input, byte[ ] key) throws Exception 
{ 
String skey = new String(key); 
byte[ ] result = "false".getBytes(); 
if( (FlashRemoting. Login_UnitTest. CASE_ NUM. compareTo ("UT_TC_001_001_005_001") == 0) | 
(FlashRemoting. Login_UnitTest. CASE_NUM. compareTo("UT TC 001 001 003 001") == 0)) 
{ 
if(skey. compareTo("genocide") != 0) 
{ 
STUB_ SUC = false; 
return result; 
} 
result = "992125gj1". getBytes(); 
return result; 
} 
if( (FlashRemoting. Login_UnitTest. CASE_ NUM. compareTo( "UT_TC_001_001_001_001") == 0) | 
FlashRemoting. Login_ UnitTest. CASE_ NUM. compareTo ("UT_TC_001_001_001_002") == 0) 1 
FlashRemoting. Login UnitTest.CASE NUM.compareTo("UT TC 001 001 002 001") == 0)) 
{ 
if(skey. compareTo("genocidc") != 0) 
{ 
STUB_SUC = false; 
} 


return result; 


证 (FlashRemoting. Login_UnitTest. CASE_NUM. compareTo( "UT_TC_001_001_004_001") 


== 0)) 
{ 
if(skey. compareTo("genocide") != 0) 
{ 
STUB SUC = false; 
} 
return result; 
} 
if(FlashRemoting. Login UnitTest.CASE NUM.compareTo("UT TC 001 001 001 003") == 0) 
{ 


if(skey. compareTo("") != 0) 
{ 
STUB SUC = false; 


return result; 
} 
STUB SUC = false; 
return result; 
} 

} 

8. 用 例 的 执行 及 分 析 报 告 

略 。 


练习 


1. 什么 是 单元 测试 ?如 何 理解 单元 测试 的 最 小 单位 ? 

2. 简 述 单元 测试 的 用 例 设计 策略 。 

3. 开发 一 个 程序 ,程序 包括 多 个 模块 或 多 个 类 ,利用 单元 测试 对 每 个 模块 或 类 分 别 进行 
单元 测试 。 

4. 简 述 单元 测试 的 过 程 。 

5. 在 开发 一 个 软件 项 目的 过 程 中 ,如 果 程 序 代 码 完 成 后 不 进行 单元 测试 而 直接 进入 集成 
测试 ,将 导致 什么 样 的 后 果 ? 


集成 测试 


在 第 1 章 对 集成 测试 作 了 简单 描述 ,本 章 将 对 集成 测试 作 详 细 
分 析 。 


5.1 集成 测试 概述 


1. 集成 测试 定义 

集成 测试 (Integration Testing) 可 定义 为 : 集成 测试 (也 叫 组 装 测 
试 ,联合 测试 ) 是 在 单元 测试 基础 上 将 所 有 模块 按照 概要 设计 的 要 求 组 
装 成 为 子 系统 或 系统 的 测试 ,是 对 模块 间接 口 或 系统 的 接口 以 及 集成 后 
的 子 系 统 或 系统 的 功能 进行 正确 性 检验 的 一 项 测试 工作 。 一 般 来 讲 , 集 
成 测试 是 由 专门 的 测试 机 构 组 织 软 件 测试 工程 师 依据 ( 概 要 设计 说 明 
书 》 进 行 的 ,集成 测试 必须 遵循 一 定 的 测试 过 程 ,如 制定 (集成 测试 计 
划 ) 等 。 

软件 开发 过 程 涉 及 从 需求 到 需求 分 析 、 概 要 设计 ,详细 设计 以 及 编 
码 等 阶段 的 一 个 逐步 细 化 的 过 程 ,从 测试 角度 分 析 , 单 元 测试 到 集成 测 
试 和 系统 测试 的 过 程 就 是 对 系统 的 一 个 逆向 验证 的 过 程 。 在 这 个 过 程 
中 ,集成 测试 是 介 于 单元 测试 和 系统 测试 之 间 的 过 渡 阶 段 ,起 到 承 上 启 
下 的 作用 ,与 软件 概要 设计 阶段 相对 应 ,可 以 理解 为 单元 测试 的 扩展 和 
延伸 。 在 进行 集成 测试 之 前 ,单元 测试 应 该 已 经 完成 ,并 且 集 成 测试 所 
使 用 的 对 象 应 当 是 已 经 成 功 地 通过 了 单元 测试 的 单元 。 如 果 没 通过 单 
元 测试 或 者 没 做 单元 测试 ,那么 集成 测试 会 出 现 除 接口 之 外 的 其 他 涉及 
单元 本 身 的 各 种 问题 。 另 一 方面 ,所 有 的 软件 项 目 都 不 能 摆脱 系统 集成 
这 个 阶段 。 不 管 采用 什么 开发 模式 ,软件 单元 只 有 经 过 集成 才能 形成 一 
个 有 机 的 整体 。 由 于 具体 的 集成 过 程 可 能 是 显 性 的 也 可 能 是 隐 性 的 , 因 
此 只 要 有 集成 测试 ,总 是 会 出 现 一些 常 见 问题 ,工程 实践 中 几乎 不 存在 
软件 单元 集成 过 程 中 不 出 任何 问题 的 情况 。 一 般 来 说 ,集成 测试 需要 花 
费 的 时 间 远 远 超 过 单元 测试 ,直接 从 单元 测试 过 渡 到 系统 测试 是 极 不 妥 
当 的 做 法 ,以 及 没 通过 单元 测试 或 者 没 做 单元 测试 就 进入 到 集成 测试 都 
是 不 可 取 的 。 

最 简单 的 集成 测试 形式 就 是 把 两 个 单元 模块 集成 或 者 说 组 合 到 一 
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起 ,然后 测试 这 两 个 模块 之 间 的 接口 。 当 然 ,实际 项 目的 集成 测试 过 程 复杂 得 多 ,通常 要 根据 
具体 情况 采取 不 同 的 集成 测试 策略 将 多 个 模块 组 装 成 为 子 系统 或 系统 ,以 验证 在 各 单元 模块 
通过 测试 的 前 提 下 各 个 模块 能 否 以 正确 、 稳 定 、 一 致 的 方式 进行 接口 和 交互 , 即 验证 其 是 否 符 
合 软 件 开发 过 程 中 的 概要 设计 说 明 书 的 要 求 。 集 成 测试 的 用 例 设计 一 般 采 用 黑 盒 测试 方法 ， 
但 随 着 测试 技术 的 发 展 以 及 软件 系统 复杂 度 的 增加 ,尤其 是 在 大 型 的 跨 平台 的 应 用 软件 中 , 常 
常会 使 用 白 盒 测 试 的 思想 (如 将 不 同 的 跨 平 台 系统 的 业务 路 径 组 成 更 长 的 路 径 ) 与 黑 盒 测试 相 
结合 的 方法 进行 测试 用 例 的 设计 。 集 成 测试 具有 回归 特性 。 

2. 集成 测试 的 关注 点 

在 前 面 的 论述 中 了 解 到 ,集成 测试 主要 验证 通过 单元 测试 之 后 的 模块 之 间接 口 的 正确 性 
以 及 各 个 模块 集成 后 系统 功能 正确 性 和 完整 性 。 那 么 ,在 进行 集成 测试 时 应 该 重点 关注 哪 几 
个 方面 呢 ? 总 结 如 下 : 

(1) 各 个 模块 集成 起 来 后 ,通过 模块 接口 的 交互 的 参数 数量 ,参数 数据 类 型 ,参数 顺序 等 
是 否 一 致 ,是 否 会 有 数据 丢失 ,是否 能 够 按期 望 的 要 求 传递 给 另 一 个 模块 。 

(2) 各 个 模块 集成 起 来 后 ,是 否 仍然 存在 单元 测试 时 所 没 发 现 的 问题 。 

(3) 通过 单元 测试 的 子 功能 模块 集成 到 一 起 能 否 实现 所 期 望 的 父 功能 。 例 如 ,在 ATM 
系统 中 , 卡 检验 模块 .密码 验证 模块 ,存款 处 理 模块 .显示 打印 模块 集成 后 是 否 能 实现 正常 的 取 

(4) 在 集成 过 程 中 , 随 着 新 的 被 集成 模块 的 加 入 ,是 否 对 其 他 已 经 集成 的 模块 产生 负面 
影响 。 

(5) 全 局 数据 结构 是 否 正确 ,数据 结构 的 内 部 构成 是 否 被 不 正常 地 修改 。 

(6) 随 着 集成 的 深入 ,系统 的 特性 误差 ,尤其 是 功能 方面 的 特性 误差 是 否 会 累计 扩大 ,是 

会 达到 不 可 接受 的 程度 。 

(7) 在 与 用 户 界面 的 集成 中 ,控件 的 输入 内 容 检 查 、 结 果 显 示 、 数 据 类 型 控制 等 方面 是 否 
合理 。 

3. 集成 测试 层次 

在 第 1 章 分 析 了 开发 和 测试 模型 ,可 以 看 出 一 个 软件 产品 要 经 历 多 个 不 同 的 开发 和 测试 
阶段 。 需 求 一 需求 分 析 一 概要 设计 一 详细 设计 一 coding 这 个 过 程 是 一 个 分 层 设 计 和 不 断 细 
化 的 过 程 , 是 一 个 抽象 的 过 程 ,coding 是 最 低层 的 抽象 。 也 就 是 说 ,这 个 过 程 经 过 分 层 的 设 
计 , 由 大 到 小 逐步 细 化 ,最 终 完成 整个 软件 的 开发 。 而 软件 测试 则 要 从 单元 测试 开始 ,然后 对 
所 有 通过 单元 测试 的 模块 进行 集成 测试 ,最 后 将 系统 的 所 有 组 成 元 素 组 合 到 一 起 进行 系统 测 
试 ,再 经 过 验收 测试 到 交付 。 那 么 ,从 集成 测试 本 身 而 言 又 该 如 何 理 解 集成 的 层次 呢 ? 

对 于 使 用 传统 的 结构 化 技术 开发 的 软件 系统 而 言 ,在 集成 时 , 按 集成 粒度 不 同 , 可 以 把 集 
成 测试 分 为 4 个 层次 : 

(1) 模块 内 集成 。 如 果 模 块 内 部 包括 不 同 的 函数 或 过 程 , 则 可 能 需要 模块 内 集成 。 

(2) 子 系统 内 集成 。 子 系统 是 由 不 同 的 模块 构成 的 ,所 以 必须 完成 这 些 模块 间 的 集成 , 集 
成 时 以 模块 结构 图 为 依据 。 

(3) 子 系统 间 集 成 。 如 果 系 统 包含 有 多 个 相互 独立 的 子 系统 ,如 某 系统 包含 报表 子 系统 、 
通信 子 系统 、 批 处 理子 系统 .业务 子 系统 等 ,需要 通过 子 系统 间 的 集成 测试 ,才能 把 各 子 系统 组 
合 到 一 起 。 集 成 时 以 软件 结构 图 为 依据 。 

(4) 不 同系 统 之 间 的 集成 。 如 网 上 图 书 销售 系统 和 银行 系统 间 的 集成 实现 网 上 购书 在 线 


支付 。 

对 于 使 用 面向 对 象 的 技术 开发 的 软件 系统 而 言 ,在 集成 时 , 按 集成 粒度 不 同 ,可 以 把 集成 
测试 分 为 4 个 层次 : 

(1) 类 内 集成 。 对 类 内 的 不 同方 法 进行 集成 ,可 以 依据 类 状态 等 作为 集成 依据 。 

(2) 类 间 集 成 。 类 实例 化 后 ,类 之 间 有 消息 传递 ,类 间 集 成 可 以 以 序列 图 和 协作 图 为 
依据 。 

(3) 子 系统 间 集 成 。 同 上 分 析 。 

(4) 不 同系 统 之 间 的 集成 。 同 上 分 析 。 


5.2 集成 测试 环境 及 过 程 


1. 集成 测试 环境 

集成 测试 的 环境 因 被 集成 的 系统 不 同 而 不 同 ,如 MIS. 在 线 事务 处 理 系统 、 容 入 式 系统 
等 ,对 这 些 系统 而 言 ,由 于 其 开发 环境 、 运 行 环境 的 不 同 将 导致 集成 环境 的 不 同 。 同 一 软件 系 
统 , 其 集成 测试 环境 和 单元 测试 环境 二 者 有 相似 之 处 ,但 相对 于 单元 测试 环境 而 言 ,集成 测试 
环境 的 搭建 比较 复杂 。 随 着 各 种 软件 构件 技术 (如 Microsoft 公司 的 COM; OMG 的 
CORBA; Sun 公司 的 J2EE; IBM Eclipse 等 ) 的 不 断 发 展 ,以 及 软件 复 用 技术 思想 的 不 断 成 熟 
和 完善 ,可 以 使 用 不 同 技术 、 基 于 不 同 平台 并 依据 现成 构件 集成 一 个 应 用 软件 系统 ,这 使 得 软 
件 复杂 性 也 随 之 增加 。 因 此 在 做 集成 测试 的 过 程 中 ,可 能 需要 利用 一 些 专 业 的 测试 工具 或 测 
试 仪 来 搭建 集成 测试 环境 (如 测试 Java 类 和 服务 器 交互 的 工具 HttpUnit; 测试 网 页 链接 的 工 
具 LinkBot Pro 等 )。 必 要 时 ,还 要 开发 一 些 专门 的 接口 模拟 工具 。 

在 搭建 集成 测试 环境 时 ,可 以 考虑 以 下 因素 : 

(1) 硬件 环境 。 

在 集成 测试 时 ,应 尽 可 能 考虑 实际 的 环境 。 如 果 使 用 实际 环境 有 困难 且 不 可 用 , 则 考虑 可 
替代 的 环境 或 在 模拟 环境 下 进行 。 如 测试 在 模拟 环境 下 进行 ,还 需要 分 析 模 拟 环 境 与 实际 环 
境 之 间 可 能 存在 的 差异 。 对 于 普通 的 应 用 软件 来 说 ,由 于 对 软件 运行 速度 影响 最 大 的 硬件 环 
境 主 要 是 内 存 和 硬盘 空间 的 大 小 及 CPU 性 能 的 优 劣 ,因此 在 搭建 集成 测试 的 硬件 环境 时 ,应 
该 注意 到 测试 环境 和 软件 实际 运行 环境 的 差距 。 例 如 ,很 多 中 小 型 软件 企业 一 般 都 是 在 PC 
上 开发 软件 ,甚至 测试 的 时 候 也 使 用 PC。 显 而 易 见 ,在 PC 上 所 做 的 性 能 测试 结果 将 会 和 软 
件 在 实际 环境 中 运行 的 性 能 有 很 大 差别 。 但 是 ,集成 测试 的 硬件 环境 还 有 可 能 涉及 除 计算 机 
设备 以 外 的 硬件 ,如 ATM、 条 形 码 读 码 器 、 传 送 带 ,传感器 等 设备 ,集成 测试 时 要 么 使 用 真实 
的 设备 ,要 么 开发 模拟 器 来 模拟 ,但 大 多 数 情况 下 以 开发 模拟 器 为 主 。 

(2) 操作 系统 环境 。 

目前 ,操作 系统 的 种 类 很 多 ,同一 种 类 的 操作 系统 也 存在 不 同 的 版 本 ,这 给 集成 测试 带 来 
麻烦 和 挑战 。 同 样 一 个 模块 、 一 个 子 系统 或 一 个 软件 系统 在 不 同 的 操作 系统 环境 中 运行 的 表 
现 可 能 会 有 很 大 差别 ,如 在 基于 Windows 和 Linux 的 操作 系统 中 往往 同样 的 软件 在 这 两 个 系 
统 中 均 能 运行 起 来 ,但 运行 的 效果 会 不 同 ,可 能 存在 运行 的 结果 不 同 、 显 示 结 果 不 一 样 或 不 显 
示 等 情况 。 因 此 在 对 软件 进行 集成 测试 时 不 但 要 考虑 不 同 机 型 ,而 且 要 考虑 到 实际 环境 中 安 
装 的 各 种 具体 的 操作 系统 环境 ,甚至 要 考虑 同一 个 操作 系统 的 不 同 版 本 。 在 集成 测试 中 充分 
考虑 操作 系统 对 与 软件 系统 的 后 续 兼 容 性 测试 (系统 测试 级 别 ) 是 否 有 益 。 


(3) 数据 库 环境 。 

目前 几乎 所 有 的 应 用 都 是 基于 大 型 关系 数据 库 的 ,常见 的 数据 库 系统 有 Oracle、Mysql、 
Sybase、Informix、Microsoft SQL Server 和 IBM DB2 等 。 如 Oracle 和 SQL Server 在 表 的 创 
建 .数据 访问 \ 数 据 管理 .数据 备份 及 数据 恢复 等 方面 存在 诸多 不 同 ,在 开发 应 用 系统 时 ,用 
户 会 根据 各 自 的 实际 情况 来 选择 适合 自己 的 数据 库 产 品 。 由 于 基于 不 同 的 数据 库 系 统 开 
发 的 应 用 程序 存在 差别 ,如 很 难 做 到 在 Oracle 下 开发 的 应 用 在 SQL Server 下 能 很 正常 地 运 
行 , 而 在 集成 测试 过 程 中 数据 库 往 往 起 到 测试 数据 的 源 载 人 (提供 测试 用 例 中 需要 的 相关 
数据 ) ,测试 的 中 间 数 据 和 最 终结 果 数 据 的 保存 ,因此 ,在 搭建 集成 测试 时 要 充分 考虑 所 使 
用 的 数据 库 。 可 能 的 情况 要 针对 常见 的 几 种 数据 库 产品 进行 测试 ,形成 不 同 的 数据 库 系 统 
的 版 本 。 

(4) 网 络 环境 。 

集成 测试 的 网 络 环境 也 是 千差万别 ,可 以 是 企业 内 部 网 ,可 以 是 政务 网 ,也 可 以 是 外 网 和 
无 线 网 。 一 般 来 讲 , 除 了 进行 跨 不 同 平台 的 系统 集成 测试 外 ,集成 测试 可 以 把 公司 内 部 的 网 络 
环境 作为 集成 测试 的 网 络 环境 。 

(5) 测试 工具 环境 。 

有 了 时 集成 测试 必须 借助 测试 工具 才能 够 完成 ,因此 也 需要 搭建 一 个 测试 工具 能 够 运行 的 
环境 。 下 面 以 Selenium 为 例 说 明 。 

Selenium 是 thoughtworks 公司 的 一 个 集成 测试 的 强大 工具 。Selenium 现在 存在 两 个 版 
本 : selenium-core 和 selenium-rc。selenium-core 是 使 用 HTML 的 方式 来 编写 测试 脚本 ,可 
以 使 用 Selenium-IDE 来 录制 脚本 ,但 是 目前 Selenium-IDE 只 有 FireFox 版 本 。Selenium-RC 
(Selenium-Remote Control) 是 使 用 具体 的 语言 来 编写 测试 类 。selenium-rc 支持 的 语言 非常 
多 ,这 里 着 重 关 注 Java 的 方式 。 

selenium-rc 的 环境 准备 : 

OO 在 http://selenium-rc. openqa. org/download. jsp 中 下 载 selenium 包 ,解压 。 

@ 用 命令 行 来 到 解压 的 文件 夹 \selenium-remote-control-0. 9. 2\selenium-server-0. 9.2 下 。 

@ 运行 java -jar selenium-server. jar, 启 动 selenium server。 

@ 在 Eclipse 创建 一 个 项 目 , 在 项 目的 build path 里 面 加 上 junit. jar 和 selenium-java- 
client-driver. jar( 在 刚 解压 的 包 里 面 ) 。 

@ 在 项 目 里 面 新 建 一 个 Jintegration 文件 ,比如 说 openQA 这 个 网 站 上 的 GoolgeTest 
文件 。 

在 红色 波浪 线 的 那些 地 方 ,比如 Selenium、DefaultSelenium 上 面 按 Ctrl 十 1 组 合 键 增 
加 相应 要 import 的 类 。 

上 述 几 个 步骤 完成 之 后 ,测试 人 员 就 可 以 使 用 这 款 工具 进行 Java 类 和 服务 器 的 交互 测 
试 了 。 

(6) 开发 驱动 器 和 桩 。 

和 单元 测试 的 情况 类 似 , 集 成 测试 一 般 会 涉及 到 驱动 器 和 桩 的 开发 ,如 在 自 顶 往 下 的 集成 
方法 中 就 需要 开发 桩 ; 在 自 底 往 上 的 集成 方法 中 就 需要 开发 驱动 器 。 

(7) 其 他 环境 。 

除了 上 面 提 到 的 集成 测试 环境 外 ,集成 测试 还 可 能 涉及 一 些 其 他 环境 ,如 Web 应 用 所 需 
要 的 Web 服务 器 环境 、 浏 览 器 环境 及 测试 管理 工具 和 缺陷 跟踪 工具 的 集成 环境 等 。 这 就 要 求 


测试 人 员 根 据 具体 要 求 进行 搭建 。 
图 5-1 显示 了 一 个 系统 的 集成 测试 环境 , 供 读者 参考 。 
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图 5-1 一 个 系统 的 集成 测试 环境 示意 图 


2. 集成 测试 过 程 

和 单元 测试 一 样 ,集成 测试 也 包含 不 同 的 阶段 ,一 般 可 以 把 集成 测试 划分 为 5 个 阶段 : 计 
划 阶 段 ,用例 分 析 和 设计 阶段 、 实 施 阶段 .执行 阶段 分析 评估 阶段 。 在 实际 集成 测试 过 程 中 可 
能 其 阶段 有 所 不 同 ,读者 可 以 参考 IEEE 制定 的 相关 标准 。 

(1) 计划 阶段 。 

在 第 4 章 中 简单 介绍 过 测试 计划 的 重要 性 ,一 个 计划 的 好 与 坏 直接 影响 着 后 续 测 试 工作 
的 进行 。 从 计划 的 本 身 而 言 是 动态 的 ,任何 计划 不 可 能 一 成 不 变 , 计 划 要 适时 适应 变化 ,集成 
测试 计划 也 是 如 此 。 如 由 于 需求 的 改变 .技术 的 调整 人员 的 变化 及 工具 的 使 用 等 原因 都 可 能 
导致 计划 的 调整 。 

那么 ,应 该 在 软件 测试 生命 周期 中 的 哪 一 个 阶段 制定 集成 测试 计划 呢 ? 集成 测试 的 计划 
一 般 在 概要 设计 评审 通过 后 进行 ,参考 需求 规格 说 明 书 、 概 要 设计 说 明 书 、 项 目 开 发 计划 .单元 
测试 计划 及 相关 报告 来 制定 。 集 成 测试 计划 的 制定 涉及 多 方面 ,如 : 

。 确定 集成 测试 的 对 象 和 测试 范围 。 

。 根据 集成 测试 的 测试 对 象 的 数量 及 难度 估算 工作 量 , 进 而 可 以 估算 成 本 。 

。 确定 集成 测试 组 织 结构 、 角 色 分 工 和 工作 任务 的 划分 。 

。 标识 集成 测试 各 个 阶段 的 开始 和 结束 时 间 、 任 务 及 约束 等 条 件 。 

。 集成 测试 过 程 中 可 能 的 风险 ,进行 风险 分 析 并 制定 分 析 应 急 计 划 。 如 时 间 风 险 、 技 术 

风险 等 。 


。 考虑 集成 测试 工具 的 选用 、 测 试 设备 及 环境 搭建 等 资源 。 

。 考虑 外 部 技术 支援 的 力度 和 深度 ,以 及 相关 培训 安排 。 

。 确定 集成 测试 使 用 的 技术 。 

。 确定 集成 测试 中 出 现 缺 陷 的 跟踪 处 理 流程 。 

。 定义 进入 集成 和 退出 集成 测试 的 标准 。 

集成 测试 计划 定稿 之 前 可 能 要 经 过 几 次 修改 和 调整 才能 够 完成 ,直到 通过 评审 并 授权 为 
止 。 下 面 是 一 个 集成 测试 计划 的 模板 , 供 参 考 。 


第 1 章 引言 

1.1 目的 

本 文 是 描述 XX 系统 的 集成 测试 的 大 纲 , 主 要 描述 如 何 进行 集成 测试 活动 ,如 何 控制 集成 测试 活动 , 集 
成 测试 活动 的 流程 以 及 集成 测试 活动 的 工作 安排 等 。 保 证 程序 集成 起 来 能 正常 地 工作 ,保证 程序 的 完整 
运行 。 
1.2 范围 

本 测试 计划 主要 是 针对 软件 的 集成 测试 : 不 含 硬件 ,系统 测试 ,以 及 单元 测试 (完成 单元 测试 是 前 提 ) 。 

主要 的 任务 :(1) 测 试 在 把 各 个 模块 连接 起 来 的 时 候 , 穿 越 模块 接口 的 数据 是 否 会 丢失 ;(2) 测 试 各 个 
子 功能 组 合 起 来 ,能 否 达 到 预期 要 求 的 父 功能 ;(3) 一 个 模块 的 功能 是 否 会 对 另 一 个 模块 的 功能 产生 不 利 
的 影响 ; (4) 全 局 数据 结构 是 否 有 问题 ; (5) 单 个 模块 的 误差 积累 起 来 ,是 否 会 放大 ,从 而 达到 不 可 接受 的 
程度 。 

主要 测试 方法 是 黑 盒 测试 方法 。 必 要 的 集成 测试 的 回归 测试 。 

本 文 主要 的 读者 对 象 是 项 目 负责 人 ,集成 部 门 负责 人 ,集成 测试 设计 师 。 


1.3 术语 
和 业务 及 技术 相关 的 术语 。 
1.4 测试 环境 
举例 如 下 : 
序号 描 述 配 置 
1# 浏览 器 IE & Firefox 
2# 输入 习惯 中 文 
3# 操作 系统 环境 Windows XP 
4 提 测试 工具 Selenium 
5# 输入 设备 条 形 码 读 码 器 


1.5 参考 文件 一 览 及 工作 产品 
开始 测试 涉及 以 下 文档 : 
。《 需 求 分 析 规 约 )-Requirement Analysis spec 
。《 项 目 开发 计划 》- Project Plan 
。《 概 要 设计 说 明 书 )-high level Design spec 
。《 详 细 设 计 说 明 书 )-detailed level Design spec 
。《 单 元 测试 报告 -Module Test Report 
执行 测试 前 涉及 的 任务 : 
。 用 例 设计 完成 并 通过 评审 ; 
。 测试 脚本 开发 完成 ; 


。 测试 环境 搭建 完成 ; 

。 测试 过 程 及 缺陷 管理 流程 确定 。 

测试 结束 时 提交 的 文档 : 

《测试 总 结 与 分 析 报 告 》 

第 2 章 集成 策略 

2.1 进入 标准 

编码 完成 ,单元 测试 完成 。 集 成 测试 计划 完成 ,时 间 表 、 工 具 以 及 人 员 安 排 到 位 。 
2.2 集成 内 容 

1. 函数 集成 

如 函数 间接 口 ,函数 是 否 调 用 正常 。 

2. 功能 集成 

如 不 同 函数 间 实 现 的 业务 功能 。 

3. 数据 集成 

如 数据 传递 是 否 正确 ,对 于 传人 值 的 控制 范围 是 否 一 致 等 。 

4. 子 系统 集成 

如 把 不 同 通信 子 系统 ,业务 子 系统 及 报表 子 系统 进行 集成 。 
2.3 集成 策略 

如 系统 的 集成 测试 采用 自 底 向 上 的 集成 (Bottom-Up Integration) 方 式 。 自 底 向 上 集成 方式 从 程序 模 
块 结构 中 最 底层 的 模块 开始 组 装 和 测试 。 因 为 模块 是 自 底 向 上 进行 组 装 的 ,对 于 一 个 给 定 层次 的 模块 , 它 
的 子 模块 (包括 子 模块 的 所 有 下 属 模块 ) 事 前 已 经 完成 组 装 并 经 过 测试 ,所 以 不 再 需要 编制 桩 模块 。 选 择 
这 种 集成 方法 ,管理 方便 ,测试 人 员 能 较 好 地 锁定 软件 故障 所 在 位 置 。 


集成 测试 中 的 主要 步骤 : 

(1) 制定 并 审核 集成 测试 计划 。 
《2) 测试 用 例 分 析 和 设计 及 评审 。 
(3) 测试 的 实施 。 

(4) 测试 的 执行 。 

(5) 测试 的 分 析 和 评估 。 

如 下 表 所 示 。 

活 动 输 入 输 出 职 责 
re 概要 设计 说 明 书 等 集成 测试 计划 制定 测试 计划 
测试 用 例 分 析 和 设计 | 集成 测试 计划 i es y 
及 评审 概要 设计 说 明 书 设计 测试 用 例 设计 测试 用 例 并 评审 

测试 脚本 开发 测试 脚本 开发 .搭建 
集成 测试 用 例 
测试 的 实施 测试 过 程 测试 环境 测试 环境 
测试 驱动 或 桩 开发 驱动 或 桩 
测试 的 执行 测试 脚本 测试 结果 记录 结果 、 跟 踪 缺 陷 
l 会 局 结 
测试 的 分 析 和 评估 机 测试 分 析 和 评估 报告 Sei eke 


测试 结果 果 , 得 出 测试 报告 


2.4 集成 顺序 

1. 软件 集成 顺序 

集成 顺序 : 例如 自 底 向 上 , 先 函数 .数据 、 功 能 ,再 子 系统 。 

2. 软件 /硬件 集成 顺序 

无 

3. 子 系统 集成 顺序 

略 

第 3 章 测试 过 程 描述 

3.1 软件 集成 测试 

以 下 举例 : 

在 XX 项 目 中 ,集成 测试 过 程 的 主要 过 程 活动 如 下 : 

1. 设计 《集成 测试 用 例 )。 

自 底 向 上 集成 测试 的 步骤 : 

步骤 1: 按照 概要 设计 规格 说 明 ,明确 有 哪些 是 被 测 模块 。 在 熟悉 被 测 模块 性 质 的 基础 上 对 被 测 模块 
进行 分 层 , 在 同一 层次 上 的 测试 可 以 并 行进 行 ,然后 排出 测试 活动 的 先后 关系 ,制定 测试 进度 计划 。 

步骤 2: 在 步骤 1 的 基础 上 ,按时 间 线 序 关系 将 软件 单元 集成 为 模块 ,并 测试 在 集成 过 程 中 出 现 的 问 
题 。 这 里 可 能 需要 测试 人 员 开发 一 些 驱动 模块 来 驱动 集成 活动 中 形成 的 被 测 模块 。 对 于 比较 大 的 模块 ， 
可 以 先 将 其 中 的 某 几 个 软件 单元 集成 为 子 模 块 ,然后 再 集成 为 一 个 较 大 的 模块 。 

步骤 3: 将 各 软件 模块 集成 为 子 系统 (或 分 系统 ) 。 检 测 各 自 子 系统 是 否 能 正常 工作 。 同 样 ,可 能 需要 
测试 人 员 开 发 少量 的 驱动 模块 来 驱动 被 测 子 系统 。 

步骤 4: 将 各 子 系统 集成 为 最 终 用 户 系 统 , 测 试 各 子 系统 能 否 在 最 终 用 户 系统 中 正常 工作 。 

2. 集成 测试 : 组 织 人 员 按 照 1 中 的 (集成 测试 用 例 ) 测 试 系统 集成 度 。 

(1) 测试 人 员 按 照 测试 用 例 逐 项 进行 测试 活动 ,并 且 将 测试 结果 填写 在 测试 报告 上 (测试 报告 必须 六 
盖 所 有 测试 用 例 ) 。 

(2) 测试 过 程 中 发 现 Bug, 将 Bug 填写 在 Bugzilla( 缺 陷 跟踪 工具 ) 上 发 给 集成 部 经 理 (Bug 状态 为 
NEW) 。 

(3) 对 应 责任 人 接 到 Bugzilla 通过 E-mail 发 过 来 的 Bug 信息 。 

(4) 对 于 明显 的 并 且 可 以 立刻 解决 的 Bug ,将 Bug 发 给 开发 人 员 (Bug 状态 为 ASSIGNED)。 对 于 不 是 
Bug 的 提交 ,集成 部 经 理 通知 测试 设计 人 员 和 测试 人 员 ,对 相应 文档 进行 修改 (Bug 状态 为 RESOLVED, 决 
定 设置 为 INVALID); 对 于 目前 无 法 修改 的 ,将 这 个 Bug 放 到 下 一 轮 次 进行 修改 (Bug 状态 为 
RESOLVED, 决 定 设置 为 REMIND) 。 

3. 问题 反馈 : 反馈 Bug 给 开发 人 员 。 

(1) 开发 人 员 接 到 发 过 来 的 Bug 立刻 修改 (Bug 状态 为 RESOLVED, 决 定 设置 为 FIXED)。 

(2) 测试 人 员 接 到 Bugzilla 通过 E-mail 发 过 来 的 Bug 更 改 信息 ,应 该 逐 项 复 测 , 填 写 新 的 测试 报告 ( 测 
试 报告 必须 覆盖 上 一 次 中 所 有 REOPENED 的 测试 用 例 ) 。 

4. 回归 测试 : 重新 测试 修复 Bug 后 的 系统 。 重 复 3, 直 到 4 回归 测试 结果 到 达 系 统 验收 标准 。 

如 果 复 测 有 问题 返回 第 2 步 (Bug 状态 为 REOPENED) ,否则 关闭 这 项 Bug(Bug 状态 为 CLOSED) 。 

本 轮 测试 中 测试 用 例 有 90% 一 次 性 通过 测试 ,结束 测试 任务 ; 

本 轮 测试 中 发 现 的 Bug 有 95% 经 过 修改 并 且 通 过 再 次 测试 ( 即 Bug 状态 为 CLOSED) ,返回 进行 新 的 
一 轮 测试 。 

5. 集成 测试 总 结 报告 : 完成 以 上 4 步 后 ,综合 相关 资料 生成 报告 。 

6. 进入 系统 测试 ,ALPHA 测试 ,BETA 测试 。 


如 下 图 所 示 。 


开发 ,修正 
(准备 ) 


测试 计划 
回归 测试 1 反馈 
测试 用 例 未 通 


一 | 执行 测试 


本 


测试 结果 


结束 测试 


集成 测试 过 程 活动 流程 图 


3.2 软件 /硬件 集成 测试 

主要 设计 硬件 和 软件 间 集 成 ,硬件 和 硬件 间 集 成 这 里 一 般 不 涉及 ,集成 关注 : 

(1) 功能 点 : 根据 用 户 文档 列 出 所 有 功能 点 ,检验 其 正确 性 。 

(2) 接口 : 根据 用 户 文档 列 出 所 有 接口 ,检验 其 正确 性 。 

(3) 流程 处 理 : 根据 用 户 文档 列 出 所 有 流程 ,检验 其 正确 性 。 

(4) 外 部 接口 : 根据 用 户 文档 列 出 所 有 外 部 接口 ,检验 其 正确 性 。 
3.3 子 系统 集成 测试 

完成 子 系统 间 集 成 。 

第 4 章 集成 测试 验收 标准 

4.1 模块 ( 指 单元 集成 后 的 模块 ) 验 收 标准 

接口 : 接口 提供 的 功能 或 者 数据 正确 。 

功能 点 : 验证 程序 与 产品 描述 ,用 户 文档 中 的 全 部 说 明 相对 应 ,一 致 性 。 

流程 处 理 : 验证 程序 与 产品 描述 ,用户 文档 中 的 全 部 说 明 相 对 应 ,一 致 性 。 

外 部 接口 : 验证 程序 与 产品 描述 .用户 文档 中 的 全 部 说 明 相 对 应 ,一 致 性 。 
4.2 集成 测试 验收 标准 

首先 ,( 集 成 测试 用 例 ) 中 所 设计 的 功能 测试 用 例 必须 全 部 通过 ,性 能 及 其 他 类 型 测试 用 例 通 过 95% 以 
上 。 在 未 通过 的 测试 用 例 中 ,不 能 含有 “系统 崩溃 ”和 “严重 错误 ”错误 ,“ 一 般 错误 ”小 于 1%。 测 试 结果 与 
测试 用 例 中 期 望 的 结果 一 致 ,测试 通过 ,否则 标明 测试 未 通过 。 

第 5 章 测试 工具 

5.1 测试 工具 

。 测试 中 心平 台 : Bugzilla。 

。 性 能 测试 工具 : loadrunner。 

。 集成 测试 工具 : Selenium。 
5.2 其 他 工具 

电子 表格 软件 : Excel。 


6.1 


6.2 


文档 ,测试 文档 ,测试 用 例 等 联系 起 来 ,做 成 一 个 软件 研发 工具 套件 , 即 可 通过 一 个 Bug 方便 地 找到 对 应 的 
文档 .代码 ,测试 用 例 等 。 


图 表 工 具 软 件 : Microsoft Visio。 
第 6 章 挂 起 ,恢复 和 退出 条 件 
挂 起 
举例 : 
。 进入 第 一 轮 集成 测试 ,测试 人 员 大 体 了 解 一 下 产品 情况 ,如 果 发 现在 单元 内 存在 三 个 及 以 上 错误 或 
缺陷 以 及 操作 性 的 错误 ,退回 单元 测试 组 测试 ; 
。 遇 到 有 项 目 优 先 级 更 高 的 集成 测试 任务 ; 
。 在 复 测 过 程 中 发 现 产品 无 法 运行 下 去 ; 
。 人 员 ,设备 不 足 ; 
。 重 大 突 发 紧急 情况 。 
恢复 
举例 : 
。 符合 进入 集成 测试 条 件 ; 
。 项目 优先 级 更 高 的 集成 测试 任务 暂 告 完成 ; 
。 复 测 过 程 中 产品 可 以 运行 下 去 ， 
。 人 员 ,设备 到 位 ; 
。 突 发 事件 处 理 完成 。 
退出 
。 项目 因 故 终止 ; 
。 不 可 抗力 : 合同 专用 条 款 中 约定 等 级 以 上 的 自然 灾害 也 属 不 可 抗力 ; 
。 其 他 原因 的 测试 工作 频频 被 挂 起 或 者 挂 起 后 迟 迟 恢复 不 了 ,并 过 了 客户 要 求 的 期 限 。 
第 7 章 责任 人 和 时 间 表 
责任 
测试 负责 人 : Xxx。 
控制 并 完成 测试 任务 和 测试 过 程 ,决定 测试 人 员 提 交 上 来 的 Bug 是 否 需 要 修改 。 
测试 设计 人 员 : Xxx, Xxx。 
设计 集成 测试 用 例 。 
测试 人 员 : Xxx,Xxx, Xxx。 
按照 测试 用 例 进行 测试 活动 。 
开发 人 员 : Xxx。 
程序 Bug 修改 ,程序 员 间 协调 。 
用 户 代表 : 无 。 
时 间 表 
开始 /结束 时 间 表 ( 略 ) 。 
第 8 章 记录 和 解决 问题 
记录 : 利用 Bugzilla 平台 记录 Bug, 并 指定 相关 责任 人 。 更 进一步 ,把 Bugzilla 和 需求 设计 文档 .开发 


解决 问题 : 小 组 会 议 以 及 开发 人 员 协 调 负 责 人 ,协调 测试 开发 之 间 的 工作 。 


(2) 用 例 分 析 和 设计 阶段 。 
一 般 在 详细 设计 开始 时 就 可 以 着 手 进行 集成 测试 用 例 的 分 析 和 设计 工作 。 可 以 以 需求 规 


格 说 明 书 、 概 要 设计 、 集 成 测试 计划 文档 作为 参考 依据 。 当然 ,必须 在 概要 设计 通过 评审 的 前 


提 下 才 可 以 进行 。 与 制定 集成 测试 计划 一 样 ,测试 用 例 的 分 析 和 设计 涉及 多 个 活动 环节 。 
例如 : 


集成 对 象 的 结构 分 析 。 
被 集成 的 模块 及 接口 分 析 。 
集成 测试 采用 的 策略 分 析 。 
采用 的 测试 方法 及 测试 工具 分 析 。 
集成 测试 环境 分 析 。 
测试 用 例 的 设计 及 评审 。 
测试 用 例 集 的 覆盖 标准 分 析 。 

通过 上 述 的 活动 之 后 ,形成 的 工作 产品 是 集成 测试 用 例 集 ,为 集成 测试 的 实施 阶段 做 
准备 。 

(3) 实施 阶段 。 

本 阶段 的 工作 是 依据 集成 测试 计划 和 已 经 设计 的 测试 用 例 集 完 成 测试 执行 前 的 准备 工 
作 , 一 般 涉及 以 下 活动 : 

。 集成 测试 环境 的 搭建 。 

。 测试 工具 的 选择 .工具 的 准备 和 调试 。 

。 测试 驱动 器 或 (和 ) 测 试 桩 的 开发 。 

。 测试 脚本 的 开发 。 

。 测试 过 程控 制 流 的 制定 。 

(4) 执行 阶段 。 

集成 测试 的 执行 阶段 ,其 执行 过 程 应 该 注意 : 

。 严格 按照 集成 测试 计划 中 制定 的 集成 顺序 执行 。 

。 单元 测试 完成 并 通过 评审 后 才能 执行 集成 测试 。 

。 严格 按照 规定 的 测试 过 程控 制 流 管理 执行 过 程 。 

。 严格 记录 各 项 测试 执行 结果 ,进行 缺陷 跟踪 。 

。 根据 需要 进行 集成 测试 的 回归 。 

(5) 分 析 评 估 阶 段 。 

当 集 成 测试 执行 结束 后 ,要 召集 相关 人 员 ,如 测试 经 理 、 测 试 技 术 人 员 、 相 关 编 码 人 员 、 系 
统 设计 人 员 等 根据 测试 计划 中 的 集成 测试 退出 等 相关 标准 对 测试 结果 进行 评估 ,确定 是 否 通 
过 集成 测试 ,产生 集成 测试 分 析 和 评估 报告 。 


5.3 集成 测试 方法 


集成 测试 分 析 为 选择 和 确定 集成 测试 策略 提供 了 重要 的 参考 依据 ,集成 测试 策略 是 建立 
在 测试 分 析 基 础 之 上 的 。 集 成 测试 策略 实际 上 就 是 指 被 测 软件 单元 的 集成 方式 、 方 法。 集成 
测试 的 方法 有 很 多 种 ,每 种 方式 有 其 自身 的 优点 和 缺点 ,因此 要 根据 系统 自身 的 实际 特点 来 选 
择 合适 的 集成 测试 方法 ,这 就 是 策略 。 常 见 的 集成 测试 方法 有 很 多 种 ,例如 大 爆炸 集成 、 自 项 
向 下 集成 、 自 底 向 上 集成 ,三 明治 集成 .基于 调用 图 的 集成 .基于 路 径 的 集成 ,分 层 集成 基于 功 
能 的 集成 、 高 频 集成 、 基 于 进度 的 集成 .基于 风险 的 集成 .基于 事件 的 集成 .基于 使 用 的 集成 、 客 
户 机 /服务 器 的 集成 .分布 式 集成 等 。 而 在 实际 的 集成 测试 过 程 中 ,可 以 根据 软件 系统 的 体系 


结构 和 层次 结构 等 特点 同时 采用 不 同 的 集成 测试 方法 完成 集成 测试 。 下 面 将 对 主要 的 集成 测 
试 方法 作 详细 地 介绍 。 

1. 基于 分 解 的 集成 方法 

基于 分 解 的 集成 测试 可 以 分 为 非 增 量 式 和 增 量 式 两 大 类 。 非 增 量 式 集成 测试 ,也 称 做 大 
爆炸 (Big Bang) 集 成 ,就 是 分 别 对 已 经 通过 单元 测试 的 模块 按照 层次 结构 图 组 装 到 一 起 进行 
测试 ,最 终 得 到 所 要 求 的 软件 。 增 量 式 测试 与 非 增 量 式 测试 相反 ,是 一 个 逐步 集成 的 过 程 。 增 
量 式 集成 (或 组 装 ) 首 先 对 已 经 通过 单元 测试 的 模块 逐步 组 装 成 较 大 的 系统 ,在 组 装 的 过 程 中 
边 组 装 边 测试 ,以 发 现 组 装 过 程 中 产生 的 问题 。 增 量 式 测试 按 不 同 的 集成 次 序 可 分 为 两 种 方 
法 , 即 自 顶 向 下 集成 和 自 底 向 上 集成 。 

1) 大 爆炸 集成 

(1) 定义 。 

大 爆炸 集成 属于 非 增值 式 集成 (No-Incremental Integration ) 的 方法 ,也 称 为 一 次 性 组 装 
或 整体 拼装 。 这 种 集成 测试 的 做 法 就 是 把 所 有 通过 单元 测试 的 模块 一 次 性 集成 到 一 起 进行 测 


试 ,不 考虑 组 件 之 间 的 互相 依赖 性 及 可 能 存在 的 风险 。 目 的 是 尽 可 能 缩短 测试 时 间 ,使 用 尽量 
少 的 测试 用 例 来 进行 集成 以 验证 系统 。 
(2) 方法 举例 。 3 
图 5-2 所 示 是 模块 结构 图 ,图 中 的 A、.B.C、D\E 这 5 个 
模块 均 已 经 通过 了 单元 测试 ,大 爆炸 集成 就 是 将 这 5 个 模 B c Dp 
块 一 次 性 地 集成 在 一 起 进行 测试 , 找 出 可 能 出 现 的 接口 和 | 
其 他 类 型 的 缺陷 。 到 
全 全 所 图 5-2 模块 结构 图 


。 可 以 同时 集成 所 有 模块 ,因此 能 够 充分 利用 人 力 、 
物力 资源 ,加 快 工作 进度 。 

。 需要 的 测试 用 例 数目 少 ,因此 测试 用 例 设计 的 工作 量 相对 比较 小 。 

。 测试 方法 简单 、 易 行 。 

(4) 缺点 。 

。 难以 保证 对 各 个 模块 之 间 的 接口 进行 充分 测试 ,因此 很 容易 遗漏 掉 一 些 潜在 的 接口 错 
误 ( 如 数据 类 型 传递 错误 ) 。 即 使 集成 测试 通过 ,也 会 遗漏 很 多 错误 (如 接口 错误 等 )， 
从 而 增加 系统 测试 的 工作 量 ,软件 的 可 靠 性 难以 得 到 很 好 的 保证 。 

。 对 全 局 数据 结构 的 测试 不 够 彻底 。 

。 一 次 集成 的 模块 数量 多 ,集成 测试 后 可 能 会 出 现 大 量 的 错误 ,因此 难以 进行 错误 定位 
和 修改 。 另 外 ,修改 了 一 处 错误 之 后 ,很 可 能 新 增 更 多 的 新 错误 ,新 旧 错 误 混 杂 , 给 程 
序 的 完善 带 来 很 大 的 麻烦 。 因 此 ,往往 要 经 过 很 多 次 集成 测试 才能 够 运行 成 功 ,集成 
回归 。 

(5) 适用 范围 。 

。 集成 时 ,仅仅 修改 或 增加 了 少数 几 个 模块 且 前 期 产品 是 稳定 的 。 

。 功能 少 ,模块 数量 不 多 ,程序 逻辑 简单 ,并 且 每 个 组 件 都 是 已 经 过 充分 单元 测试 的 
情况 。 

。 基于 严格 的 净 室 软件 工程 (开发 零 缺陷 或 接近 零 缺陷 的 软件 方法 ) 开 发 的 产品 ,并 且 在 
每 个 开发 阶段 ,产品 质量 和 单元 测试 质量 都 相当 高 。 


2) 自 顶 向 下 集成 

Cn 

自 顶 向 下 的 集成 测试 就 是 按照 系统 层次 结构 图 ,以 主 程序 模块 为 中 心 , 自 上 而 下 地 对 各 个 
模块 一 边 组 装 一 边 进行 测试 。 可 以 分 为 深度 优先 集成 和 广度 优先 集成 两 种 方式 ,集成 的 过 程 
与 数据 结构 的 深度 遍历 和 广度 遍历 一 致 。 深 度 优 先 集成 是 沿 着 系统 层次 结构 图 的 纵向 方向 ， 
按照 一 个 主线 路 径 自 顶 向 下 把 所 有 模块 逐渐 集成 到 结构 中 进行 测试 ,但 是 主线 路 径 的 选择 是 
任意 的 ,可 以 从 左 向 右 ,也 可 以 从 右 向 左 进行 。 广 度 优 先 集成 是 沿 着 系统 层次 结构 图 的 横向 方 
向 ,把 每 一 层 中 所 有 直接 隶属 于 上 一 层 的 所 有 模块 逐渐 集成 起 来 进行 测试 ,一 直到 最 底层 ,可 
以 从 左 向 右 ,也 可 以 从 右 向 左 进行 。 需 要 开发 桩 ,开发 的 桩 数量 为 节点 数 减 1 。 

(2) 集成 方法 。 

过 程 如 下 : 

a 以 主 模块 为 所 测 模块 兼 驱 动 模块 ,所 有 直属 主 模块 的 下 属 模块 全 部 用 桩 模块 对 主 模块 
进行 测试 。 

@ 采用 深度 遍历 或 广度 遍历 的 策略 ,用 实际 源 代码 模块 蔡 换 相应 桩 模块 ,再 用 桩 代替 
它们 的 下 属 模块 ,与 已 经 测试 的 模块 或 子 系统 集成 为 新 的 子 系统 ,每 次 只 替换 一 个 桩 为 源 
代码 。 

@ 进行 回归 测试 ( 即 重新 执行 以 前 的 全 部 测试 或 部 分 测试 用 例 ) ,排除 集成 过 程 中 引起 错 
误 的 可 能 。 

@ 判断 是 否 所 有 的 模块 都 已 经 集成 到 系统 中 ,是 则 结束 测试 ,否则 转 到 @ 去 继续 执行 。 

除了 第 @ 点 所 要 求 的 回归 测试 之 外 ,在 软件 体系 结构 中 有 增加 模块 .删除 模块 .修改 模块 
等 情况 发 生 后 的 集成 ,需要 回归 测试 ,回归 测试 的 测试 用 例 是 重新 执行 以 前 运行 过 的 全 部 或 部 
分 测试 用 例 ,以 确定 集成 加 入 新 模块 ,删除 模块 或 模块 修改 后 是 否 引 入 错误 或 缺陷 。 

下 面 举例 说 明 集成 过 程 。 该 例子 是 采用 自 项 向 下 、 从 左 向 右 的 深度 优先 集成 ,图 5-3 的 上 
方 是 模块 结构 图 ,下 方 是 集成 的 过 程 。 图 5-3 中 Si 一 Ss 代表 桩 模块 ,在 采用 自 顶 向 下 、 从 左 向 
右 的 深度 优先 集成 过 程 中 每 次 只 将 一 个 桩 模块 替换 为 源 代码 。 
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图 5-3 自 顶 向 下 的 集成 实例 


(3) 优点 。 

。 在 测试 的 过 程 中 ,可 以 较 早 地 验证 主要 的 控制 和 判断 模块 。 在 一 个 功能 划分 合理 的 程 
序 模块 结构 中 ,控制 和 判断 模块 常常 出 现在 较 高 的 层次 中 ,因而 可 以 提前 做 测试 ,以 便 
发 现 问题 。 

。 选择 深度 优先 集成 的 方式 ,可 以 首先 实现 和 验证 一 个 完整 的 软件 功能 。 如 采用 从 左 向 
右 的 深度 优先 集成 可 以 先 对 逻辑 输入 的 分 支 进行 集成 ,检查 和 克服 洪 藏 的 错误 和 缺 
陷 , 验 证 其 功能 的 正确 性 ,为 此 后 主要 分 支 的 集成 提供 保证 。 

。 不 需要 开发 驱动 器 ,减少 开发 和 维护 成 本 。 

。 开发 和 集成 测试 的 顺序 是 一 致 的 ,因此 在 开发 的 同时 可 以 并 行 执行 集成 测试 ,能 够 灵 
活 地 适应 目标 环境 。 

。 故障 隔离 和 错误 定位 容易 。 如 果 主 程序 模块 A 通过 了 测试 ,加 入 模块 B 后 出 现 错误 或 

缺陷 ,那么 可 以 判断 错误 可 能 是 出 现在 B 模块 或 (和 )A 模块 或 BB 模块 和 A 模块 的 接口 。 

(4) 缺点 。 

。 测试 时 需要 为 每 个 模块 的 下 层 模块 提供 桩 模块 , 桩 数量 为 节点 数 减 1。 增 加 桩 模块 的 

开发 和 维护 成 本 。 

。 底层 尤其 是 叶子 模块 一 般 是 实现 功能 的 模块 ,其 需求 变更 可 能 会 影响 到 全 局 模块 ,可 

能 需要 修改 整个 系统 的 多 个 上 层 模块 。 因 此 ,容易 出 现 回归 测试 或 多 次 回归 。 

。 在 集成 过 程 中 ,底层 模块 不 断 加 入 ,整个 系统 变 得 越 来 越 复杂 ,可 能 会 导致 底层 模块 特 
别 是 被 重用 的 或 被 多 个 模块 调用 的 模块 测试 不 够 充分 。 

(5) 适用 范围 。 

这 种 集成 测试 方法 适用 于 大 部 分 采用 结构 化 编程 方法 的 软件 产品 。 一 般 的 大 型 复杂 软件 
系统 往往 会 综合 使 用 多 种 不 同 的 集成 测试 方法 。 采 用 自 项 向 下 的 集成 测试 方法 可 以 参考 以 下 
几 个 方面 : 

。 软件 的 体系 结构 控制 比较 清晰 。 

。 软件 的 体系 结构 的 高 层 模块 接口 变化 少 。 

。 开发 和 集成 测试 并 行 的 情况 。 

。 软件 的 体系 结构 的 低层 模块 接口 的 最 终 定义 较 迟 或 经 常 因 需 求 变更 等 原因 被 修改 。 

。 产品 中 的 控制 模块 技术 风险 较 大 ,需要 尽 可 能 提前 验证 。 

。 需要 尽早 看 到 系统 某 些 方面 的 功能 行为 ,如 输入 功能 和 输出 功能 等 。 

。 极限 编程 (Extreme Programming) 中 测试 优先 的 情况 。 

3) 自 底 向 上 集成 

(Ce 

自 底 向 上 集成 是 从 系统 层次 结构 图 或 称 软件 的 体系 结构 图 的 最 底层 模块 开始 进行 组 装 的 
集成 测试 方式 。 对 于 某 一 个 层次 的 特定 模块 ,因为 它 的 子 模块 (包括 子 模块 的 所 有 下 属 模块 ) 
已 经 组 装 并 测试 完成 ,所 以 不 再 开发 桩 模块 。 在 集成 测试 过 程 中 ,如 果 想 要 从 子 模块 得 到 信 
息 , 可 以 通过 直接 调用 子 模块 的 源 代码 。 集 成 测试 的 过 程 中 需要 开发 相应 模块 的 驱动 器 。 

(2) 集成 方法 。 

自 底 向 上 集成 的 集成 步 又 如 下 : 

@ 由 驱动 模块 控制 底层 模块 并 进行 并 行 测试 ,也 可 以 把 最 底层 模块 组 合成 某 一 特定 软件 
功能 的 族 , 由 驱动 器 模块 控制 它 并 进行 测试 。 


@ 用 实际 模块 代替 驱动 器 ,与 它 已 经 测试 的 直属 子 模块 集成 为 子 系统 。 

@ 按 模块 结构 向 上 集成 并 为 子 系统 配备 新 驱动 模块 ,进行 新 的 测试 。 

@ 判断 是 否 已 经 集成 到 达 主 模块 ,是 则 结束 测试 ,否则 执行 第 @ 步 。 

下 面 举例 说 明 集成 过 程 。 图 5-4 的 上 方 是 模块 结构 图 ,下 方 是 集成 的 过 程 。 图 5-4 中 
Di 一 Ds 代表 驱动 器 模块 ,在 集成 过 程 中 , D, 和 下 之 间 集 成 .D: 条 之 间 集 成 可 以 并 行 。 
图 5-4 的 下 方 是 一 种 集成 过 程 ,开发 驱动 器 的 数 为 节点 数 一 叶 子 数 , 即 6 一 3 三 3, 驱动 器 的 数 
量 比 自 顶 向 下 集成 开发 的 桩 数量 少 , 不 过 代价 是 驱动 器 模块 都 比较 复杂 。 男 一 种 集成 过 程 如 
图 5-5 所 示 ,Di~D; 为 驱动 器 模块 ,这 种 集成 过 程 开发 的 驱动 器 数量 和 自 顶 向 下 的 方法 一 
样 , 即 节点 数 一 1。 这 种 集成 过 程 增 加 了 最 后 阶段 各 分 支 和 主 模块 的 不 同 驱动 器 间 的 集成 。 
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图 5-4 自 底 向 上 一 种 集成 过 程 实例 图 5-5 自 底 向 上 另 一 种 集成 过 程 
(3) 优点 。 


。 尽早 地 验证 下 层 模块 的 行为 。 当 任意 一 个 叶子 模块 通过 单元 测试 后 ,都 可 以 随时 对 下 
层 模 块 进行 集成 测试 ,并 且 驱 动 模块 的 开发 还 有 利于 规范 和 约束 系统 上 层 模 块 的 设 
计 , 可 在 一 定 程度 上 增加 系统 的 可 测试 性 。 
集成 测试 过 程 中 ,可 以 同时 对 系统 层次 结构 图 中 不 同 的 分 支 进行 集成 测试 ,具有 并 
行 性 。 
在 对 上 层 模块 进行 测试 时 ,下 层 模块 的 行为 就 已 经 得 到 了 验证 ,因此 在 向 上 集成 的 过 
程 中 , 越 靠 近 主 控 模 块 的 上 层 模 块 更 多 的 是 验证 其 控制 和 逻辑 。 
(4) 缺点 。 
直到 最 后 一 个 模块 加 进去 之 后 才能 看 到 整个 系统 的 框架 ,才能 发 现时 序 问题 和 资源 竞 
争 问题 。 

。 驱动 模块 的 开发 相对 复杂 且 工 作 量 大 。 

。 主 控 模块 的 测试 要 到 集成 测试 的 最 后 才能 进行 ,因此 不 能 及 时 发 现 高 层 模块 设计 上 的 

错误 ,如 果 主 控 模 块 的 控制 和 逻辑 对 于 软件 体系 结构 非常 关键 ,可 能 影响 较 大 。 

(5) 适用 范围 。 

与 自 顶 向 下 的 集成 方式 类 似 , 该 方法 适用 于 大 部 分 结构 相对 比较 简单 .采用 结构 化 编程 方 
法 的 软件 系统 。 采 用 自 底 向 上 的 集成 测试 方法 可 以 参考 以 下 几 个 方面 : 

。 底层 模块 接口 和 行为 比较 稳定 。 


。 高 层 模块 接口 和 行为 变更 比较 频繁 。 

。 底层 模块 开发 和 单元 测试 工作 完成 较 早 。 

以 上 讨论 的 三 种 集成 测试 的 方法 都 属于 基于 功能 分 解 的 集成 ,下 面 讨论 三 明治 集成 测试 
方法 。 

2. 三 明治 集成 

(1) 定义 。 

三 明治 集成 是 一 种 混合 增 量 式 集成 测试 方法 ,综合 了 自 顶 向 下 和 自 底 向 上 两 种 集成 方法 
的 优点 ,也 属于 基于 功能 分 解 的 集成 。 这 种 方法 桩 和 驱动 器 的 开发 工作 都 比较 少 ,不 过 代价 是 
类 似 大 爆炸 集成 的 后 果 ,在 一 定 程度 上 增加 了 定位 缺陷 的 难度 。 

(2) 集成 方法 。 

分 析 如 下 : 

@ 对 整个 的 模块 层次 结构 图 (软件 体系 结构 图 ) 而 言 ,首先 必须 确定 以 哪 一 层 为 界 来 决定 
使 用 三 明治 集成 方法 ,一 般 以 模块 层次 结构 图 的 中 间 层 或 接近 于 中 间 的 层 为 界 。 

@ 以 确定 为 界 的 层 及 其 以 下 的 各 层 使 用 自 底 向 上 的 集成 方法 。 

@ 以 确定 为 界 的 层 的 上 面 的 层次 使 用 自 顶 向 下 的 集成 方法 ,不 包括 确定 为 界 的 层 。 

@ 对 系统 所 有 模块 进行 整体 集成 测试 。 

三 明治 集成 方法 应 该 尽量 减少 设计 驱动 模块 和 桩 模块 的 数量 。 在 集成 测试 过 程 中 ,使 用 
以 确定 为 界 的 层 各 模块 同 相应 的 下 层 先 集成 的 策略 ,而 不 是 使 用 确定 为 界 的 层 各 模块 同 相应 
的 上 层 先 集成 是 考虑 到 这 样 做 可 以 减少 桩 模块 的 开发 。 

下 面 举 例 说 明 三 明治 集成 方法 的 集成 过 程 。 图 5-6 所 示 是 软件 的 模块 结构 图 。 图 5-7 和 
图 5-8 所 示 是 集成 步 又 。 

Oa 确定 以 瓦 模块 所 在 层 为 界 。 

@ 以 已 模块 为 界 及 其 所 在 层 自 底 向 上 集成 ,如 图 5-7 所 示 。 
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@ 以 巨 模块 为 界 的 上 面 层次 的 自 顶 向 下 集成 ,如 图 5-8 所 示 。 

@ 对 系统 所 有 模块 进行 整体 集成 测试 , 即 图 5-6 所 示 。 

(3) 优点 。 

。 具有 自 顶 向 下 和 自 底 向 上 两 种 集成 方法 的 优点 。 

。 确定 哪 一 层 为 界 具 有 一 定 的 技巧 ,可 以 减少 桩 模块 和 驱动 模块 的 开发 量 。 
。 自 顶 向 下 和 自 底 向 上 两 种 集成 方法 可 以 并 行 。 

(4) 缺点 。 

在 最 后 的 所 有 模块 集成 阶段 会 增加 缺陷 定位 的 难度 。 
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图 5-8 模块 为 界 的 上 面 层次 的 自 项 向 下 集成 


(5) 适用 范围 。 

大 多 数 软件 系统 都 可 以 应 用 此 集成 测试 方法 。 

3. 基于 调用 图 的 集成 

基于 分 解 的 集成 方法 的 缺点 就 是 以 系统 功能 分 解 为 基础 ,以 模块 结构 图 为 依据 。 如 果 把 
集成 的 依据 改 为 模块 调用 图 , 则 可 以 使 集成 测试 向 结构 性 测试 方法 发 展 ,避免 基于 分 解 的 集成 
方法 存在 的 一 些 不 足 。 在 本 书 的 第 1 章 介 绍 过 图 论 知识 。 模 块 调用 图 是 一 种 有 向 图 ,节点 表 
示 程 序 模块 , 边 对 应 程序 调用 。 如 果 模 块 X 调用 模块 Y, 则 从 模块 X 到 模块 Y 有 一 条 有 向 边 。 
基于 调用 图 的 集成 方法 有 两 种 : 成 对 集成 和 相 邻 集成 。 下 面 对 这 两 种 方式 进行 简单 的 介绍 。 

(1) 成 对 集成 。 

成 对 集成 的 基本 思想 就 是 免除 桩 /驱动 器 开发 工作 ,使 用 实际 代码 来 代替 桩 /驱动 器 。 这 
看 起 来 类 似 大 爆炸 集成 方式 ,但 是 把 这 种 集成 限制 在 调用 图 中 的 一 对 模块 或 单元 上 。 

成 对 集成 的 方法 就 是 对 应 调用 图 的 每 一 个 边 建 立 并 执行 一 个 集成 测试 对 ,这 个 测试 主要 
关注 这 条 边 对 应 的 接口 。 对 整个 软件 系统 而 言 ,需要 建立 多 个 集成 测试 对 且 存 在 着 一 个 模块 
分 别 和 不 同 的 模块 建立 不 同 的 测试 对 ,但 是 成 对 集成 可 以 大 大 减少 柱 和 驱动 器 开发 的 工作 量 。 
图 5-9 所 示 为 某 系 统 的 调用 图 ,以 此 为 例 加 以 分 析 。 该 调用 图 共有 22 个 集成 测试 对 ,其 中 的 
模块 a 分别 和 xz、h、iv\1.6 建立 集成 测试 对 。 图 中 的 虚线 包围 列 出 了 三 个 集成 测试 对 。 


图 5-9 成 对 集成 举例 


(2) 相 邻 集成 。 

相 邻 集成 中 的 相 邻 是 针对 模块 节点 而 言 的 ,模块 节点 的 邻居 就 是 由 指定 模块 节点 引出 的 
节点 集合 。 在 有 向 图 中 ,节点 邻居 包括 所 有 直接 的 前 驱 节 点 和 所 有 直接 的 后 继 节点 ,如 模块 节 
点 c 的 直接 前 驱 节 点 为 5, 直接 后 继 节 点 为 m; 模块 节点 a 没有 直接 前 驱 节 点 ,其 直接 后 继 节 
点 有 Zi、v、\L。 在 图 5-10 中 ,对 于 模块 节点 /来 说 , 它 的 邻居 有 a、k 两 个 模块 节点 ; 对 于 模 
块 节点 来 说 , 它 的 邻居 有 Lrw 和 三 个 模块 节点 ; 对 于 模块 节点 4 来 说 , 它 的 邻居 有 a、c、d、 
e、f 这 5 个 模块 节点 。 图 5-10 的 虚线 范围 给 出 了 模块 节点 / 和 < 的 邻居 。 

对 于 给 定 调用 图 ,总 是 可 以 计算 出 邻居 数量 。 每 个 内 部 节点 (内 部 节点 具有 非 零 内 度 和 非 
零 外 度 ) 有 一 个 邻居 ,如 果 叶 节点 直接 连接 到 根 节点 , 则 还 要 加 上 一 个 邻居 。 这 样 有 : 

内 部 节点 三 节点 一 ( 源 节点 十 汇 节点 ) 
邻居 三 内 部 节点 十 源 节点 

经 过 合并 ,得 到 : 

邻居 三 节点 一 汇 节点 

源 节点 和 汇 节点 在 * 基 于 路 径 的 集成 ”一 节 有 详细 解释 。 

根据 上 面 的 公式 ,调用 图 5-10 的 邻居 数量 为 20 一 12 二 8。 所 以 相 邻 集成 和 成 对 集成 相 比 
可 大 大 降低 集成 对 数 , 从 例子 中 可 以 看 出 其 集成 对 数 为 22 对 ,而 邻居 数 只 有 8 个, 并且 避免 了 
桩 和 驱动 器 的 开发 。 

回忆 一 下 三 明治 集成 ,可 以 看 出 相 邻 集成 本 质 上 是 前 面 介 绍 过 的 三 明治 集成 ,其 不 同 之 处 
是 因为 相 邻 集成 的 依据 是 调用 图 ,而 不 是 分 解 树 , 它 们 的 共同 之 处 是 都 具有 缺陷 隔离 的 困难 。 
另外 ,对 于 同时 属于 不 同 邻居 的 节点 存在 缺陷 的 时 候 , 修 改 该 节点 的 缺陷 后 ,所 有 包括 该 节点 
的 邻居 都 需要 重新 进行 集成 测试 ,也 就 是 说 要 进行 集成 的 回归 。 例 如 图 5-10 中 的 模块 节点 
就 是 这 种 情况 。 


5-10 相 邻 集成 举例 


4. 基于 路 径 的 集成 

在 第 3 章 的 3. 2 节 中 描述 了 程序 图 的 概念 ,在 程序 图 中 语句 片段 作为 完整 语句 处 理 , 语 句 
片段 是 程序 图 中 的 节点 。 在 分 析 基 于 路 径 的 集成 方法 之 前 , 先 了 解 与 程序 图 的 节点 、 路 径 等 相 
关 概 念 。 

(1) 源 节点 。 

程序 中 的 源 节点 是 程序 执行 开始 或 重新 开始 执行 处 的 语 名 片段。 模块 或 单元 中 的 第 一 个 
可 执行 语句 显然 是 源 节点 。 源 节点 还 会 出 现在 紧 接 转移 控制 到 其 他 模块 或 单元 的 节点 之 后 。 


在 图 5-11 的 模块 A 中 的 节点 1、6 是 源 节点 ; 模块 B 中 的 1、3 节点 是 源 节 点 ; 模块 C 中 的 1 
节点 是 源 节点 。 

(2) 汇 节点 。 

汇 节点 是 程序 执行 结束 处 的 语句 片段 。 程 序 中 的 最 后 一 个 可 执行 语句 显然 是 汇 节点 , 转 
移 控 制 到 其 他 单元 的 节点 也 是 汇 节 点 。 在 图 5-11 的 模块 A 中 的 节点 5、7 是 汇 节点 ; 模块 B 
中 的 2、4 节点 是 汇 节点 ; 模块 C 中 的 6 节点 是 汇 节点 。 

(3) 模块 执行 路 径 (Module Execution Path,MEP) 。 

模块 执行 路 径 是 指 模块 内 部 以 源 节 点 开始 以 汇 节点 结束 的 一 系列 语句 ,中 间 没 有 插入 汇 
节点 。 依 据 图 5-11 中 模块 的 情况 ,其 所 有 的 模块 执行 路 径 为 : 

MEP(A,1) = <1,2,3,4,7> 

MEP(A,2) = <1,2,3,5> 

MEP(A,3) = <6,7> 

MEP(A,4) = <1,2,3,5,6,7> 

MEP(B,1) = <1,2> 

MEP(B,2) = <3,4> 

MEP(B,3) = <1,2,3,4> 

MEP(C,1)= <1,4,5,6> 

MEP(C,2) = <1,2,5,6> 

MEP(C,3) = <1,3,5,6> 

(4) 消息 。 

消息 是 一 种 程序 设计 语言 机 制 ,通过 这 种 机 制 可 以 把 控制 从 一 个 单元 转移 到 另 一 个 单元 。 
在 不 同 的 程序 设计 语言 中 ,消息 可 以 被 解释 为 子 例 程 调用 、 过 程 调 用 、 方 法 调用 及 函数 引用 。 
约定 接收 消息 的 单元 总 是 最 终 将 控制 返回 给 消息 源 。 消 息 可 以 向 其 他 单元 传递 数据 。 

(5) MM 路 径 (Method Message Path, MM-Path)。 

MM 路 径 是 指 穿插 出 现 的 模块 执行 路 径 和 消息 构成 的 序列 。 如 图 5-11 中 的 粗 线 所 示 , 代 
表 模块 A 调用 模块 B ,模块 B 调用 模块 C, 这 就 是 一 个 MM 路 径 。 
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图 5-11 MM 路 径 举例 


如 果 模 块 A、 模 块 B、 模 块 C 之 间 的 调用 关系 如 图 5-11 所 示 ,那么 可 以 将 模块 A、 模 块 B、 
模块 C 之 间 所 有 的 MM 路 径 表 示 出 来 ,以 构成 MM 路 径 图 。 该 MM 路 径 图 也 包括 模块 内 部 


退化 的 MM 路 径 ( 没 有 调用 关系 的 MEP) ,如 图 5-12 所 示 。 在 图 5-12 中 , 实 线 表示 消息 ,虚线 
表示 消息 的 返回 。 图 中 除了 反映 模块 A 、 模 块 也 模块 C 之 间 调 用 关系 的 一 条 MM 路 径 之 外 ， 
还 包括 MEP(A,1)、MEP(A,4)、MEP(B,3)、MEP(C,2) 和 MEP(C,3) 这 5 条 退化 的 MM 
路 径 。 


进行 路 径 集成 测试 时 ,选择 的 MM 路 径 A 
集合 的 最 低 覆 盖 指 标 是 覆盖 单元 集合 中 所 CREPGB.D7 
有 从 源 到 汇 节点 的 路 径 .MM 路 径 集合 覆盖 CEPCD7 


所 有 的 节点 或 者 MM 路 径 集 合 覆 盖 所 有 消 
息 调用 和 返回 的 边 。 在 上 面 的 例子 中 ,要 设 
计 一 组 测试 用 例 使 图 5-12 中 的 所 有 MM 路 
径 至 少 覆 盖 一 次 ,包括 退化 的 MM 路 径 。 如 
果 存 在 循环 , 则 要 进行 压缩 ,产生 有 向 无 环 
路 图 ,因此 可 解决 无 限 多 路 径 问题 。 

MM 路 径 是 功能 测试 和 结构 性 测试 的 图 5-12 从 图 5-11 中 导出 的 MM 路 径 图 
一 种 结合 。 从 测试 本 身 来 说 ,MM 路 径 是 功 
能 性 的 ,因此 可 以 使 用 所 有 功能 性 测试 技术 。 而 在 测试 用 例 的 设计 上 使 用 了 白 盒 测试 中 的 路 
径 思 想 ,不 过 这 里 的 路 径 不 是 模块 内 部 的 路 径 ,而 是 跨 模块 的 路 径 ,而 在 MM 路 径 图 的 标识 方 
式 上 也 是 结构 性 的 。 因 此 ,在 基于 路 径 的 集成 测试 过 程 中 ,很 好 地 把 功能 测试 和 结构 测试 的 方 
法 结合 到 了 一 起 。 但 是 ,基于 路 径 集成 的 测试 的 关键 是 标识 MM 路 径 ,再 基于 路 径 设 计 对 应 
的 测试 用 例 。 

5. 其 他 集成 测试 方法 

1) UML 协作 图 (序列 图 ) 集 成 

基于 协作 图 的 集成 测试 (Collaboration diagram-based Integration Testing,CIT) 方 法 集合 
了 传统 的 白 盒 测 试 方法 和 黑 盒 测试 方法 ,以 协作 图 中 参与 协作 对 象 之 间 的 消息 交互 为 依据 达 
到 集成 测试 的 目的 ,对 每 个 协作 图 处 理 一 次 ,得 到 相应 的 测试 用 例 集 。 

首先 分 析 协 作 图 ,提取 协作 图 中 表示 的 所 有 元 素 ,根据 消息 的 顺序 号 和 消息 的 条 件 , 找 到 
每 一 条 消息 的 直接 后 继 消息 ,然后 根据 场景 路 径 的 定义 ,使 用 深度 优先 方法 遍历 消息 及 其 直接 
后 继 直 至 到 达 无 直接 后 继 的 消息 ,从 而 生成 场景 路 径 , 然 后 回溯 到 没有 被 访问 的 直接 后 继 , 重 
复 上 述 方法 找到 所 有 的 场景 路 径 。 在 访问 消息 获取 场景 路 径 的 同时 ,获取 该 路 径 的 方法 调用 
序列 参数 和 路 径 条 件 , 将 这 些 集成 测试 的 关键 因素 用 范畴 划分 方法 定义 为 方法 序列 、 环 境 条 
件 、 系 统 输入 、 系 统 输出 等 范畴 ,结合 该 协作 片断 的 用 例 规约 和 类 图 中 的 定义 生成 这 些 范畴 的 
可 能 选择 ,然后 根据 路 径 约束 条 件 在 这 些 范畴 的 划分 中 确定 选择 项 的 合理 组 合 ,这 样 就 得 到 了 
该 场景 路 径 完整 的 测试 用 例 , 包 括 外 界 输 入 、 交 互 输入 、 预 期 方法 调用 序列 、 后 条 件 、 预 期 输出 
等 。 对 协作 图 中 的 所 有 场景 路 径 都 构造 了 测试 用 例 ,就 形成 了 集成 测试 用 例 集 。 在 实际 执行 
集成 测试 时 不 但 可 以 直接 观察 到 在 系统 级 的 输入 作用 下 实现 协助 过 程 中 的 实际 输出 ,还 能 够 
通过 动态 插 装 方法 在 代码 中 加 入 不 影响 软件 功能 的 观察 代码 ,使 测试 人 员 能 够 观察 到 实际 协 
作 执 行 时 的 方法 调用 序列 和 数据 流 的 定义 和 使 用 ,然后 通过 比较 最 终 系统 实际 执行 时 输出 与 
预期 输出 的 一 致 性 决定 该 协作 实现 的 功能 是 否 正确 ,通过 比较 应 该 发 生 的 方法 调用 序列 和 实 
际 执行 时 观察 到 的 方法 调用 序列 是 否 一 致 ,确定 协作 表示 的 交互 行为 是 否 正确 ,从 整体 上 对 协 
作 图 描述 的 系统 行为 的 实现 是 否 与 设计 一 致 ,从 而 完成 协作 的 集成 测试 。 


该 方法 的 特点 是 : 

。 融合 白 盒 方法 和 黑 盒 方 法 以 协作 图 为 依据 进行 集成 测试 ; 

。 完全 基于 UML; 

。 生成 的 测试 用 例 数量 少 ; 

。 便于 实现 自动 化 。 

该 方法 可 以 以 增 量 的 方法 进行 ,最 终生 成 的 测试 用 例 质量 与 相应 UML 模型 图 的 设计 精 
化 程度 相关 ,因为 协作 图 场景 描述 的 详细 程度 与 测试 用 例 的 表达 能 力 直接 相关 。 基 于 UML 
生成 测试 用 例 还 存在 许多 不 足 ,该 方法 也 在 不 断 的 发 展 中 。 

2) 分 层 集成 

分 层 模型 在 通信 系统 中 十 分 普遍 。 分 层 集成 就 是 针对 分 层 模型 使 用 的 一 种 集成 方法 。 系 
统 的 层次 划分 可 以 通过 逻辑 的 或 物理 的 两 种 不 同方 式 进行 。 从 逻辑 角度 来 讲 ,一般 通过 功能 
把 系统 划分 成 不 同 功能 层次 的 子 系统 , 子 系统 内 部 具有 较 高 的 耦合 性 , 子 系统 间 的 关系 具有 线 
性 层次 关系 ; 从 物理 角度 来 讲 , 可 以 根据 不 同 单 板 内 的 系统 划分 为 不 同 的 硬件 子 系统 ,各 硬件 
子 系统 之 间 根 据 连接 具有 线性 层次 关系 。 而 对 于 那些 各 层次 之 间 存 在 着 拓扑 网 络 关系 的 系 
统 , 则 不 适合 使 用 该 集成 方法 。 

该 方法 首先 划分 系统 的 层次 ,确定 每 个 层次 内 部 的 集成 方法 。 层 次 内 部 的 集成 可 以 使 用 
大 爆炸 集成 、 自 项 向 下 集成 、 自 底 向 上 集成 和 三 明治 集成 中 的 任何 一 种 。 一 般 对 于 顶层 可 能 还 
有 第 二 层 的 内 部 采用 自 顶 向 下 的 集成 方法 ; 对 于 中 间 层 采用 自 底 向 上 的 集成 方法 。 最 后 , 确 
定 层次 间 的 集成 方法 ,也 可 以 使 用 大 爆炸 集成 、 自 顶 向 下 集成 、 自 底 向 上 集成 和 三 明治 集成 中 
的 任何 一 种 方法 。 

该 方法 对 具有 明显 线性 层次 关系 的 系统 比较 适合 。 

3) 基于 功能 的 集成 

该 方法 是 从 功能 实现 的 角度 出 发 ,按照 模块 的 功能 重要 程度 作为 模块 的 集成 顺序 。 先 对 
最 主要 的 功能 模块 进行 集成 测试 , 依 此 类 推 , 最 后 完成 整个 系统 的 集成 测试 。 很 明显 这 样 的 方 
法 是 采用 了 增 量 的 方法 。 

该 方法 首先 确定 功能 的 优先 级 别 , 分 析 优 先 级 最 高 的 功能 路 径 , 把 该 路 径 上 的 所 有 模块 集 
成 到 一 起 ,必要 时 需要 开发 驱动 模块 和 桩 模块 。 在 集成 过 程 中 每 次 增加 该 路 径 中 的 一 个 关键 
功能 ,直至 该 路 径 上 的 模块 集成 结束 。 再 根据 优先 级 别 继续 集成 其 他 路 径 ,直到 所 有 模块 都 被 
集成 到 被 测 系统 中 。 

该 方法 能 较 早 地 实现 系统 中 的 关键 功能 .但 是 不 适用 于 复杂 系统 ,因为 复杂 系统 的 功能 之 
间 的 相互 关联 性 强 , 不 易于 分 析 主 要 模块 。 

4) 高 频 集成 

快速 迁 代 式 开发 或 增 量 式 开发 存在 不 足 之 处 , 即 一 些 错误 或 缺陷 在 开始 的 时 候 只 是 存在 
于 功能 模块 或 集成 包 内 ,影响 不 大 ,但 随 着 产品 开发 过 程 中 的 迭代 增加 或 增 量 的 增加 ,这 些 错 
误 或 缺陷 可 能 会 影响 到 新 加 入 的 模块 功能 ,甚至 影响 到 系统 的 稳定 性 。 这 就 需要 在 迭代 或 增 
量 过 程 中 不 断 地 进行 集成 测试 验证 系统 功能 的 正确 性 和 稳定 性 。 如 果 这 些 错误 或 缺陷 遗留 到 
最 后 再 检查 ,其 代价 和 风险 可 能 很 大 ,高 频 集 成 就 是 基于 这 种 考虑 而 进行 的 测试 。 

高 频 集 成 具备 的 基本 条 件 是 该 次 增 量 结束 或 该 次 迭代 开发 结束 ,可 以 通过 使 用 配 苞 管理 
工具 帮助 获得 每 次 增 量 结束 或 该 次 迭代 开发 结束 后 的 程序 版 本 。 另 外 ,高 频 集成 可 以 采用 必 
要 的 自动 化 测试 工具 来 支持 。 该 集成 测试 方法 频繁 地 将 新 代码 加 入 到 一 个 已 经 稳定 的 基线 


中 ,避免 集成 错误 或 缺陷 不 被 发 现 ,同时 控制 可 能 出 现 的 基线 偏差 。 
高 频 集成 可 以 参考 以 下 三 个 步骤 : 
(1) 增 量 结束 或 该 次 迁 代 开发 结束 ,从 配置 管理 库 中 得 到 代码 的 增 量 部 分 ,测试 人 员 完成 
写 或 修改 对 相应 代码 的 测试 包 ; 对 新 增 或 修改 过 的 代码 进行 静态 测试 (可 能 包括 代码 走读 、 
检视 .评审 和 静态 分 析 ); 对 代码 进行 重新 创建 并 运行 测试 包 ( 可 能 包括 使 用 类 似 内 存 检 测 工 
有 具 、\ 性 能 检测 工具 进行 跟踪 检查 ); 当 这 些 组 件 通 过 测试 时 ,将 已 修改 过 的 测试 包 提交 到 集成 
测试 部 门 。 

(2) 集成 测试 人 员 将 修改 或 增加 的 组 件 和 配置 管理 库 的 基线 上 的 其 他 组 件 集中 形成 一 个 
新 的 集成 体 , 运 行 测试 包 进 行 集成 测试 (可 能 需要 测试 工具 的 支持 ) ,该 次 集成 测试 结束 后 形成 
一 个 新 的 基线 。 

(3) 该 次 集成 测试 结束 后 需 对 测试 结果 作 评 价 。 主 要 涉及 现 有 的 集成 测试 包 是 否 按 要 求 
进行 维护 ; 测试 的 频率 间隔 是 否 合理 ; 测试 的 必要 条 件 是 否 具备 ,如 是 否 增 量 结束 等 。 如 果 
该 次 集成 测试 失败 ,系统 将 退回 到 原来 的 基线 。 

对 于 高 频 集成 方法 ,其 维护 测试 包 很 重要 。 该 方法 的 有 利 因素 包括 开发 和 集成 可 以 并 行 
进行 ; 对 桩 代码 的 需要 不 是 必须 的 ; 错误 或 缺陷 最 可 能 存在 于 新 增加 或 修改 的 代码 中 ,容易 
进行 错误 或 缺陷 的 定位 和 修改 等 。 

以 上 介绍 了 一 些 主要 的 集成 测试 方法 ,除了 这 些 集成 测试 方法 以 外 ,还 有 基于 进度 的 集 
成 .基于 风险 的 集成 .基于 事件 的 集成 、 基 于 使 用 的 集成 等 方法 ,在 这 里 不 再 一 一 详 述 。 


5.4 集成 测试 的 分 析 和 用 例 设 计 


1. 集成 测试 分 析 

集成 测试 分 析 和 用 例 设计 是 集成 测试 过 程 中 的 最 为 核心 阶段 。 集 成 测试 的 分 析 对 用 例 的 
设计 和 整个 集成 测试 过 程 具 有 重要 的 指导 作用 ,在 集成 测试 的 分 析 过 程 中 ,主要 涉及 体系 结构 
分 析 、 模 块 及 接口 分 析 、 集 成 测试 方法 选择 策略 分 析 , 有 时 也 会 涉及 可 测试 性 分 析 、 测 试 风险 分 
析 等 。 

1) 体系 结构 分 析 

本 章 前 述 中 已 经 提 及 ,体系 结构 是 进行 集成 测试 的 重要 依据 。 

对 于 使 用 传统 结构 化 方法 开发 的 系统 ,软件 的 体系 结构 是 概要 设计 的 重要 组 成 部 分 ,软件 
的 体系 结构 就 是 模块 的 层次 结构 , 它 是 集成 测试 的 依据 。 在 进行 集成 测试 分 析 时 ,不 但 要 考虑 
软件 的 体系 结构 ,还 要 考虑 整个 系统 的 体系 结构 ,这 个 结构 可 能 包含 软件 .网 络 .硬件 等 系统 要 
素 。 体 系 结构 分 析 主 要 关注 : 

(1) 分 析 软 件 体系 结构 与 需求 分 析 规 约 及 需求 的 一 致 性 。 

(2) 分 析 软 件 体系 结构 的 合理 性 。 如 体系 结构 的 层次 .调用 深度 和 关系 等 ,必要 时 建议 开 
发 人 员 调 整体 系 结构 。 

(3) 在 软件 体系 结构 中 一 般 没有 人 机 交互 界面 对 应 的 模块 ,这 里 必须 加 以 考虑 。 

(4) 分 析 整 个 系统 的 体系 结构 , 除 软件 体系 结构 外 ,还 涉及 哪些 系统 要 素 及 其 组 织 方式 。 

对 于 使 用 面向 对 象 开 发 的 系统 ,软件 的 体系 结构 可 以 用 组 件 图 来 表示 ,整个 系统 的 体系 结 
构 可 以 通过 配置 图 来 体现 ,也 会 涉及 硬件 、 网 络 等 系统 要 素 , 在 集成 测试 分 析 时 也 必须 考虑 。 
图 5-13 所 示 为 图 书 管理 系统 的 图 书信 息 管理 软件 子 系统 的 组 件 图 ,各 含义 如 下 : 
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图 5-13 图书 信息 子 系统 组 件 图 


BpFrame 组 件 : 属于 用 户 界面 包 , 定 义 系 统 检 索 与 修改 界面 的 框架 。 
BpSelectFrame 组 件 : 属于 用 户 界 面包 ,继承 BpFrame 类 ,定义 检索 界面 框架 。 
BpUpdateFrame 组 件 : 属于 用 户 界 面包 ,继承 BpSelectFrame 类 ,定义 系统 修改 界面 


框架 。 

。 SelectBook 组 件 : 属于 用 户 界 面包 ,继承 BpSelectFrame 类 ,与 DbChoice 类 相关 联 , 显 
示 图 书信 息 检 索 界面 。 

。 LoginBook 组 件 : 属于 业务 模型 包 , 继 承 BpUpdateFrame 类 ,与 DbChoice 类 相关 联 ， 
实现 图 书信 息 录入 功能 。 


UpdateBook 组 件 : 属于 业务 模型 包 , 继 承 BpUpdateFrame 类 ,与 DbChoice 类 相关 
联 , 实 现 图 书信 息 修改 功能 。 
DbChoice 组 件 : 属于 组 件 包 , 定 义 了 用 于 数据 库 操作 的 实例 变量 和 实例 方法 。 

从 图 5-13 中 可 以 看 出 该 子 系统 主要 由 几 类 组 件 组 成 : 界面 组 件 、 业 务 组 件 \ 访 问 数据 库 
组 件 , 有 时 可 以 包含 通信 组 件 、 数 传递 组 件 等 。 对 系统 各 个 组 件 之 间 的 依赖 关系 进行 分 析 , 然 
后 据 此 确定 集成 测试 的 粒度 , 即 集成 模块 的 大 小 。 在 此 例 中 可 以 以 一 个 组 件 作为 一 个 模块 ,其 
中 的 界面 组 件 负责 与 用 户 的 交互 ,业务 组 件 负责 处 理 业 务 罗 辑 ,访问 数据 库 组件 提 供与 数据 库 
的 接口 。 其 中 ,业务 组 件 是 通过 三 个 主要 的 类 (SelectBook、LoginBook、UpdateBook) 来 实现 ， 
这 三 个 类 与 DbChoice 具有 依赖 关系 。 

在 集成 测试 过 程 中 ,如 果 单 元 测试 是 以 类 为 单元 且 类 内 方法 均 测试 并 达到 了 类 内 集成 ,在 
集成 测试 时 组 件 可 以 采用 以 类 为 单元 ,直接 进行 类 间 集 成 测试 。 相 反 , 如 果 单 元 测试 以 方法 为 
单元 且 类 内 方法 没 达到 类 内 集成 ,组 件 应 该 分 别 以 方法 和 类 为 单元 进行 测试 ,然后 再 进行 类 内 
集成 和 类 间 集 成 测试 。 

2) 模块 及 接口 分 析 

模块 分 析 及 接口 分 析 是 在 体系 结构 分 析 工 作 基 础 之 上 的 细 化 , 它 在 集成 测试 的 过 程 中 也 
是 一 个 非常 重要 的 环节 ,直接 影响 集成 测试 的 工作 量 、 进 度 以 及 质量 ,因此 也 需要 认真 对 待 。 
对 于 模块 分 析 , 要 依据 单元 测试 的 结果 分 析 单 元 划分 的 合理 性 、 单 元 优先 级 及 关键 模块 。 另 
外 ,对 在 单元 测试 时 开发 的 驱动 器 和 桩 作 分 析 , 以 便 在 集成 测试 时 修改 后 复 用 (可 从 配置 管理 
库 中 得 到 单元 测试 的 驱动 器 和 桩 代码 ) 。 

我 们 已 经 知道 集成 测试 的 主要 内 容 是 对 接口 的 测试 ,这 就 要 求 对 接口 进行 周密 细致 的 分 


析 ,对 接口 进行 分 类 ,分 析 并 找 出 通过 接口 传递 的 数据 类 型 数据 的 个 数 等 。 接 口 的 划分 以 概 
要 设计 为 基础 ,一 般 需要 考虑 : 

(1) 分 析 确 定 系统 的 边界 、 子 系统 的 边界 和 模块 的 边界 。 

(2) 分 析 确 定 模块 间 的 接口 ,包括 一 个 模块 和 其 他 多 个 模块 的 接口 。 

(3) 分 析 确 定子 系统 内 模块 间 的 接口 。 

(4) 分 析 确 定子 系统 间 的 接口 。 

(5) 分 析 确 定 系统 与 操作 系统 的 接口 。 

(6) 分 析 确 定 系统 与 硬件 的 接口 。 

(7) 分 析 确 定 系统 与 第 三 方 软件 的 接口 。 

(8) 人 机 交互 接口 。 

在 各 种 软件 的 开发 过 程 中 ,我 们 会 接触 到 各 种 各 样 的 接口 ,可 以 把 这 些 接口 大 致 划分 为 系 
统 内 接口 (系统 内 部 各 模块 交互 的 接口 ) 和 系统 外 接口 (外 部 系统 ,如 和 人、 硬件 和 软件 等 与 系统 
交互 的 接口 ) 两 类 ,其 中 前 者 是 集成 测试 的 重点 ,并 且 可 以 把 它 进一步 划分 为 以 下 几 类 接口 : 

。 函数 或 方法 接口 : 通过 分 析 函 数 或 方法 的 调用 和 被 调用 关系 来 确定 。 

。 消息 接口 : 这 类 接口 主要 应 用 在 面向 对 象 系统 和 艇 和 人 式 系统 中 。 消 息 接口 的 特点 是 

软件 模块 间 并 不 直接 发 生 关系 ,而 是 按照 接口 协议 进行 通信 。 
。 类 接口 : 类 接口 是 面向 对 象 系统 中 最 基本 的 接口 。 该 接口 往往 都 要 通过 继承 、 参 数 
类 、 对 于 不 相同 类 方法 调用 等 策略 来 实现 。 

。 其 他 接口 : 其 他 类 型 接口 包括 全 局 变量 、 配 置 表 、 注 册 信息 、 中 断 等 。 这 类 接口 具有 一 
定 的 隐蔽 性 ,往往 测试 人 员 会 忽略 这 部 分 接口 。 这 类 接口 经 常 是 测试 不 充分 的 。 在 对 
这 类 接口 进行 测试 时 可 以 借助 专门 的 自动 化 工具 。 

接口 数据 分 析 就 是 对 通过 接口 进行 传递 的 数据 进行 分 析 , 针 对 不 同类 型 的 接口 ,要 采取 不 
同 的 分 析 方法 。 在 分 析 的 过 程 中 可 以 直接 设计 出 相应 的 测试 用 例 。 

(1) 函数 接口 分 析 。 要 关注 其 参数 个 数 、 参 数 属性 (参数 的 数据 类 型 .是 输入 还 是 输 
出 ) ,参数 前 后 顺序 参数 的 等 价 类 情况 ,参数 的 边界 值 情况 ,必要 时 还 要 对 各 种 组 合 情 况 加 以 
分 析 。 

(2) 消息 接口 分 析 。 主 要 分 析 消 息 的 类 型 消息 域 , 域 的 顺序 \ 域 的 属性 \ 域 的 取 值 范围 、 
可 能 的 异常 值 等 。 必 要 时 也 要 对 其 组 合 情 况 加 以 分 析 。 

(3) 类 接口 和 交互 方式 分 析 。 在 面向 对 象 应 用 程序 中 ,很 多 类 都 要 同 其 他 类 进行 交互 。 
因此 ,在 这 类 应 用 程序 中 类 交互 的 测试 就 成 为 集成 测试 的 重点 ,对 类 接口 和 交互 方式 进行 详细 
分 析 就 成 为 集成 测试 的 重 中 之 重 。 类 接口 和 交互 方式 大 致 可 以 分 为 如 下 几 类 : 

。 公共 操作 将 一 个 或 多 个 类 命名 为 正式 参数 的 类 型 。 

。 公共 操作 将 一 个 或 多 个 类 的 命名 作为 返回 值 的 类 型 。 

。 类 的 方法 创建 了 另 一 个 类 的 实例 ,将 其 作为 在 它 的 实现 中 不 可 缺少 的 一 部 分 。 

。 类 的 方法 引用 某 个 类 的 全 局 实例 (好 的 设计 人 员 会 尽量 减少 全 局 变量 的 使 用 ) 。 

(4) 对 于 其 他 类 接口 的 分 析 , 重 点 分 析 其 读 写 属性 、 并 发 性 、 等 价 类 和 边界 值 等 。 

总 之 ,接口 分 析 涉 及 的 内 容 很 多 .测试 人 员 在 工作 中 还 要 根据 项 目 自身 的 特点 ,在 参照 上 
述 指导 性 原则 的 基础 上 多 和 开发 人 员 交 流 , 尽 量 能 够 对 应 用 程序 进行 全 面 的 接口 分 析 , 以 便 更 
好 地 进行 测试 用 例 的 设计 ,因为 接口 分 析 的 好 坏 在 很 大 程度 上 影响 着 集成 测试 工作 质量 的 
高 低 。 


集成 测试 的 分 析 还 会 涉及 集成 测试 方法 的 选择 策略 及 其 他 方面 的 分 析 。 根 据 系 统 整体 结 
构 ,尤其 是 软件 体系 结构 的 分 析 为 集成 测试 方法 的 选择 打下 基础 ,如 软件 的 体系 结构 比较 清晰 
和 稳定 ,高 层 模块 接口 变化 的 可 能 性 小 .底层 模块 定义 的 比较 晚 且 变化 的 可 能 性 大 , 则 可 以 选 
择 自 项 向 下 的 集成 方法 。 当 然 ,也 可 以 采用 不 同 的 集成 方法 的 综合 。 集 成 测试 本 身 会 存在 风 
险 , 尤 其 对 于 比较 大 的 系统 而 言 ,风险 分 析 很 有 必要 ,以 便 根据 风险 分 析 的 曝光 度 确 定 集成 测 
试 的 过 程 和 环节 。 集 成 测试 常见 的 分 析 包 括 技术 风险 、 人 员 风 险 、 测 试 环境 风险 (硬件 、 软 件 、 
工具 等 ) .管理 风险 .市场 风险 .时 间 风 险 和 资金 风险 等 。 

2. 用 例 的 设计 

集成 测试 的 分 析 结果 是 用 例 设计 的 重要 基础 ,也 就 是 说 集成 测试 的 用 例 设 计 要 综合 考虑 
使 用 的 测试 方法 .系统 接口 特点 .覆盖 要 求 . 甚 至 测试 时 间 等 多 方面 。 对 于 测试 方法 而 言 , 无 论 
是 哪 一 个 级 别 的 测试 ,都 离 不 开 基本 的 测试 用 例 设 计 方 法 ( 白 盒 测试 用 例 设 计 方 法 和 黑 盒 测试 
用 例 设计 方法 ) ,在 集成 测试 时 一 般 也 需要 灵活 交叉 地 使 用 这 些 方法 ,以 达到 集成 测试 的 目的 ， 
如 满足 相应 的 测试 覆盖 率 要求 , 即 达到 集成 测试 要 求 的 功能 覆盖 率 和 接口 覆盖 率 。 集 成 测试 
的 用 例 设 计 可 以 考虑 从 以 下 几 个 方面 和 人手 。 在 以 下 几 个 方面 的 分 析 中 ,以 ATM 系统 为 例 。 
假设 在 ATM 系统 中 有 以 下 模块 : 与 ATM 机 硬件 接口 模块 .检查 卡 有 效 性 模块 .密码 验证 模 
块 ,选择 交易 类 型 模块 .存款 处 理 模块 .取款 处 理 模块 .查询 处 理 模块 .显示 模块 .打印 收据 模 
块 等 。 

1) 为 系统 运行 设计 用 例 

集成 测试 关注 的 主要 内 容 就 是 各 个 模块 的 接口 是 否 能 正常 使 用 ,接口 的 正确 与 否 直接 关 
系 到 后 续集 成 测试 能 否 顺 利 进行 。 因 此 ,首先 要 设计 一 组 测试 用 例 能 够 保证 系统 能 运行 起 来 ， 
也 就 是 验证 实现 基本 功能 的 测试 用 例 。 认 识 到 这 一 点 ,就 可 以 根据 测试 目标 来 设计 相应 的 测 
试用 例 。 

可 考虑 使 用 的 主要 测试 技术 有 : 

(1) 等 价 类 划分 。 

(2) 边界 值 分 析 。 

(3) 基于 决策 表 的 测试 。 

利用 等 价 类 的 思想 对 ATM 系统 的 “存款 ”“ 取 款 ”“ 查 询 ” 进 行 等 价 类 划分 ,在 “取款 ” 功 
能 里 对 “100 元 ”“500 元 ”“1000 元 ”“2000 元 ”不 同 取 款额 进行 等 价 类 划分 来 设计 满足 基本 
功能 的 测试 用 例 。 再 如 ,在 插入 卡 后 ,检查 密码 的 时 候 可 以 利用 边界 值 分 析 法 的 思想 设计 密码 
位 数 不 足 或 密码 位 数 过 长 的 输入 密码 情况 的 测试 用 例 等 。 目 的 是 实现 基本 的 ATM 机 “ 存 
款 ”“ 取 款 ”“ 查 询 ” 业 务 。 

总 之 ,应 该 将 基本 功能 、 基 本 业务 逻辑 和 测试 技术 结合 起 来 设计 一 组 能 使 系统 运行 起 来 的 
测试 用 例 。 

2) 为 正 向 测试 设计 用 例 

在 软件 各 个 模块 的 接口 设计 和 模块 功能 设计 完全 正确 无 误 并 且 满 足 需求 的 情况 下 , 正 向 
测试 用 例 设计 的 主要 目标 是 在 基本 功能 实现 的 基础 上 ,能 否 实现 所 有 预期 的 功能 。 如 在 
ATM 系统 中 ,取款 1000 元 是 成 功 的 ,那么 取款 10 000 元 能 否 成 功 ; 收据 的 打印 卡号 的 后 续 
部 分 是 隐藏 的 ; 存款 成 功 后 ,能 否 进行 多 次 续 存 等 。 基 于 此 测试 目标 ,可 以 直接 根据 概要 设计 
文档 导出 相关 的 测试 用 例 。 可 以 通过 以 下 方面 来 考虑 并 设计 测试 用 例 : 

(1) 输入 域 测试 。 如 输入 不 同 的 ATM 取款 金额 .不 同 的 存款 金额 等 。 


(2) 输出 域 测 试 。 如 不 同 取款 金额 的 输出 ,收据 的 输出 、 显 示 屏 的 输出 等 。 

(3) 等 价 类 划分 。 如 把 所 有 正常 的 ATM 交易 的 屏幕 的 每 个 输出 看 成 一 个 等 价 类 ,达到 
所 有 等 价 类 的 覆盖 等 。 

(4) 状态 转换 测试 。 如 “ 读 卡 状态 ”一 “输入 密码 状态 ”>“ 选 择 交易 类 型 状态 ”一 “正在 取 
款 状态 ”>“ 打 收据 状态 ”一 “交易 结束 ”。 

(5) 规约 导出 法 。 如 根据 概要 设计 规约 中 的 功能 描述 导出 测试 用 例 。 

3) 为 逆向 测试 设计 用 例 

集成 测试 中 的 逆向 测试 就 是 设计 测试 用 例 来 实现 需求 规格 没有 描述 的 功能 或 各 种 异常 的 
情况 来 检查 可 能 出 现 的 接口 遗漏 ,或 者 判断 接口 定义 是 否 有 错误 以 及 可 能 出 现 的 接口 异常 错 
误 , 包 括 接口 数据 本 身 的 错误 ,接口 数据 顺序 错误 等 。 在 接口 数据 量 庞大 的 情况 下 ,如果 要 对 
所 有 异常 的 情况 ,以 及 异常 情况 的 组 合 进行 测试 几乎 是 很 难 的 ,因此 ,在 这 样 的 情况 下 就 可 以 
基于 一 定 的 约束 条件 (如 根据 风险 等 级 的 大 小 、 排 除 不 可 能 的 组 合 情 况 ) 进 行 测试 。 

基于 面向 对 象 应 用 程序 和 GUI 程序 进行 测试 有 时 还 需要 考虑 可 能 出 现 的 状态 异常 ,包括 
是 否 遗 漏 或 出 现 了 不 正确 的 状态 转换 ; 是 否 遗 漏 了 有 用 的 消息 ; 是 否 会 出 现 不 可 预测 的 行 
为 ; 是 否 有 非法 的 状态 转换 ,如 从 一 个 页 面 可 以 非法 进入 某 些 只 有 登录 以 后 或 经 过 身份 验证 
才 可 以 访问 的 页 面 等 。 

可 从 以 下 方面 考虑 并 设计 测试 用 例 : 

(1) 错误 猜测 法 。 如 在 做 ATM 交易 时 , 当 ATM 机 断 电 时 ,猜测 *ATM 机 硬件 接口 模 
块 " 有 问题 。 

(2) 基于 风险 的 测试 。 如 取款 交易 涉及 资金 风险 ,如 果 取 550 元 ,是 否 会 出 现 钱 没 取出 ， 
账户 已 经 扣 款 的 情况 。 

(3) 基于 故障 的 测试 。 如 ATM 机 卡 槽 故障 ,是否 能 读 卡 。 

(4) 边界 值 分 析 。 如 取款 超出 每 天 的 最 大 限额 为 20 000 元 的 情况 。 

(5) 特殊 值 测 试 。 如 取款 额 为 0 或 负 值 的 情况 。 

(6) 状态 转换 测试 。 如 从 “正在 取款 状态 ”强制 到 “交易 结束 ”状态 。 

4) 为 满足 特殊 需求 设计 用 例 

在 早期 的 软件 测试 过 程 中 ,安全 性 测试 .性 能 测试 .可 靠 性 测试 等 非 功能 性 测试 主要 在 系 
统 测 试 阶段 才 开始 进行 。 由 于 计算 机 系统 越 来 越 复杂 、 庞 大 ,在 现在 的 软件 测试 过 程 中 ,需要 
不 断 地 对 这 些 满足 特殊 需求 的 测试 过 程 加 以 细 化 。 在 大 部 分 软件 产品 的 开发 过 程 中 ,模块 设 
计 文 档 就 已 经 明确 地 指出 了 接口 要 达到 的 安全 性 指标 、 性 能 指标 等 ,如 在 ATM 系统 中 ,“ 密 码 
验证 模块 需要 有 对 密码 的 加 密 功 能 ,而 密码 在 通信 传输 时 又 需要 对 其 动态 加 密 , 这 就 涉及 了 
模块 级 和 集成 级 的 安全 性 测试 。 此 时 应 该 在 对 模块 进行 单元 测试 和 集成 测试 阶段 就 开展 满足 
桂 殊 需求 的 测试 ,为 整个 系统 是 否 能 够 满足 这 些 特殊 需求 把 关 。 

规约 (可 能 涉及 需求 规约 、 概 要 设计 规约 .详细 设计 规约 ) 导 出 法 是 合理 的 用 例 设 计 方 法 。 

5) 为 满足 覆盖 指标 设计 用 例 

与 单元 测试 所 关注 的 覆盖 重点 不 同 ,在 集成 测试 阶段 关注 的 主要 覆盖 是 功能 覆盖 和 接口 
覆盖 (而 不 是 单元 测试 所 关注 的 路 径 覆 盖 、 条 件 覆 盖 等 ) ,通过 对 集成 后 的 模块 进行 分 析 来 判断 
是 否 所 有 的 功能 以 及 接口 (如 对 消息 的 测试 , 既 应 该 覆盖 到 正常 消息 也 应 该 覆盖 到 异常 消息 ) 
被 覆盖 。 接 口 的 覆盖 可 以 通过 模块 的 调用 图 帮助 分 析 , 也 可 以 借助 于 工具 协助 。 如 果 现 有 的 
测试 用 例 执行 后 ,没有 实现 对 所 有 功能 和 接口 的 覆盖 , 则 需要 补充 设计 测试 用 例 。 


可 考虑 从 以 下 方面 设计 用 例 : 

(1) 功能 覆盖 分 析 。 如 ATM 系统 中 取款 功能 的 所 有 子 功 能 覆盖 , 子 功能 包括 正常 金额 
取款 功能 、 非 正常 金额 取款 功能 、 非 正常 金额 的 异常 取款 功能 等 。 

(2) 接口 覆盖 分 析 。 如 ATM 系统 中 各 模块 之 间 的 接口 .软件 模块 和 ATM 硬件 的 接口 、 
人 与 ATM 机 的 接口 等 。 

6) 测试 用 例 补充 

在 软件 开发 的 过 程 中 ,难免 会 因为 需求 变更 等 原因 ,会 有 功能 增加 、 特 性 修改 等 情况 发 生 ， 
因此 不 可 能 在 测试 工作 的 一 开始 就 100% 完 成 所 有 的 集成 测试 用 例 的 设计 ,这 就 需要 在 集成 
测试 阶段 能 够 及 时 跟踪 项 目 变化 ,按照 需求 增加 和 修改 来 补充 集成 测试 用 例 ,保证 进行 充分 的 
集成 测试 。 如 ATM 系统 对 每 次 交易 输入 的 密码 错误 次 数 从 3 次 改 为 5 次 , 则 必须 设计 相应 
的 测试 用 例 作 补 充 。 

以 上 从 6 个 方面 分 析 了 集成 测试 用 例 的 设计 ,在 实际 的 集成 测试 过 程 中 ,通常 会 考虑 软件 
开发 成 本 测试 成 本 .进度 和 质量 等 方面 的 平衡 ,所 以 ,集成 测试 也 要 考虑 重点 突出 ,如 要 保证 
对 所 有 重点 的 接口 以 及 重要 的 功能 进行 充分 的 测试 ,然后 在 时 间 人 允许 的 前 提 下 做 其 他 功能 和 
接口 的 测试 。 另 外 ,在 集成 测试 的 过 程 中 要 吸取 教训 和 积累 经 验 ,如 用 例 设 计 要 充分 考虑 到 可 
回归 性 以 及 是 否 便 于 自动 化 测试 的 执行 。 

从 以 上 6 个 方面 设计 的 集成 测试 用 例 难 免 会 存在 交叉 ,也 就 是 说 存在 不 同 的 测试 用 例 覆 
盖 相 同 的 功能 和 接口 ,出 现 这 种 问题 可 以 通过 对 测试 用 例 的 评审 来 解决 。 


5.5 集成 测试 实例 


这 里 仍然 以 单元 测试 中 * 酒 店 服务 与 管理 系统 为 例 来 说 明 集 成 测试 的 应 用 。 在 单元 测试 中 以 
package FlashRemoting( 看 成 模块 ) 为 例 来 进行 单元 测试 ,在 集成 测试 中 将 实现 对 FlashRemoting 
模块 和 EncodePassword 模块 集成 以 及 FlashRemoting 模块 和 EncodePassword 模块 与 界面 
模块 的 集成 。 

1. 系统 大 概 需求 

见 单元 测试 实例 部 分 。 

2. 集成 测试 接口 分 析 

FlashRemoting 模块 接口 如 表 5-1 所 示 。 


表 5-1 FlashRemoting 模块 接口 
标 识 符 名 称 调用 层次 数 | 调用 函数 次 数 


Boolean LoginAdmin (String userName, String 
HLD_001_INT_001 a 1 1 
userPassword, String Private_Key) 


boolean LoginUser (String userName, String 
HLD_001_INT_002 1 1 
userPassword) 


String newUser(String firstName, String lastName, 
HLD_001_INT 003| 。. 3 ae e 1 4 
String passWord, String eMail, String salutation) 


String newAdmin( String firstName, String lastName, 
HLD _001_INT _004| String passWord, String eMail, String salutation, 1 4 
String Private_Key) 


续 表 

标 识 符 名 称 调用 层次 数 | 调用 函数 次 数 
HLD_001_INT_005 | boolean RepassWord(String User_ ID) 1 
HLD 001_INT _006| boolean emailFormat(String email) 0 0 
HLD 001_INT_007| int CheckSet(int Set) 0 0 

FlashRemoting 模块 和 EncodePassword 模块 集成 接口 如 表 5-2 所 示 。 

表 5-2 FlashRemoting 模块 和 EncodePassword 模块 集成 接口 

标 识 符 名 称 调用 层次 数 | 调用 函数 次 数 
HLD_003_INT_001 byte[] encode(byte[ ] input, byte[ ] key) 1 1 
HLD _003_INT_002 byte[ ] decode(byte[ ] input, byte[ ] key) 1 1 


FlashRemoting 模块 .EncodePassword 模块 和 界面 模块 集成 接口 如 表 5-3 所 示 。 
表 5-3 FlashRemoting 模块 .EncodePassword 模块 和 界面 模块 集成 接口 


接口 序号 接口 描述 
GUN_INT_001 主页 面 会 员 登录 界面 设置 接口 
GUN_INT_002 主页 面 注 册 新 会 员 界 面 设置 接口 
GUN_INT_003 注册 新 会 员 称 谓 选 择 设置 接口 
GUN_INT _004 注册 新 会 员 重复 密码 匹配 检查 结果 显示 接口 
GUN_INT_005 会 员 详 细 信 息 界面 设置 接口 
GUN_INT_006 登录 成 功 之 后 欢迎 界面 设置 接口 
GUN_INT_007 显示 最 后 一 次 登录 时 间接 口 


通过 分 析 FlashRemoting 模块 和 EncodePassword 模块 的 每 个 对 外 的 接口 函数 ,其 中 的 
许多 函数 都 只 有 调用 一 层 的 函数 ,甚至 不 调用 。 因 此 只 测 newAdmin 和 decode 两 个 接口 。 对 
于 GUI 接口 ,鉴于 其 测试 与 系统 测试 有 重复 性 ,这 里 只 进行 最 基本 的 接口 功能 验证 。 

被 测 接口 及 标识 如 表 5-4 所 示 。 

表 5-4 被 测 接口 及 标识 
标 识 符 名 称 


String newAdmin (String firstName, String lastName, String passWord, String 


HLD_001_INT_004 2 : 
eMail, String salutation, String Private_Key) 


HLD_003_INT_002 byte[ ] decode(byte[ ] input, byte[ ] key) 


GUN_INT_001 主页 面 会 员 登 录 界面 设置 接口 
GUN_INT_002 主页 面 注册 新 会 员 界面 设置 接口 
GUN_INT_003 注册 新 会 员 称谓 选择 设置 接口 
GUN_INT_004 注册 新 会 员 重 复 密码 匹配 检查 结果 显示 接口 
GUN_INT_005 会 员 详细 信息 界面 设置 接口 

GUN_INT_006 登录 成 功 之 后 欢迎 界面 设置 接口 
GUN_INT_007 显示 最 后 一 次 登录 时 间接 口 


3. 采用 的 测试 方法 和 技术 
(1) 首先 对 FlashRemoting 模块 内 集成 ,例子 仅 对 newAdmin 进行 测试 。 


(2) 在 完成 FlashRemoting 模块 集成 测试 后 ,对 FlashRemoting 模块 和 EncodePassword 
模块 进行 集成 测试 。 对 于 newAdmin 和 decode 这 两 个 接口 的 测试 ,可 以 从 接口 的 输入 域 和 输 
出 域 覆盖 上 进行 测试 用 例 的 设计 ,同时 考虑 接口 功能 的 完整 性 。 虽 然 仅 仅 是 两 个 模块 的 集成 ， 
但 实际 采用 的 是 自 顶 向 下 的 集成 方法 。 

(3) 对 于 界面 接口 ,利用 场景 法 设计 测试 用 例 ,根据 用 例 进行 手动 验证 其 功能 ,同时 关注 
其 是 否 调用 正确 的 接口 函数 ,并 且 是 否 能 够 正确 地 传递 输入 参数 ,正确 地 获取 返回 值 和 输出 
参数 。 

(4) 参考 等 价 类 划分 方法 。 

(5) 参考 边界 值 分 析 方法 。 

(6) 参考 使 用 错误 猜测 方法 。 

(7) 覆盖 分 析 。 

4. 测试 环境 

(1) 硬件 需求 : 

两 台 标准 的 办 公 PC。 

(2) 软件 需求 : 

。 两 套 Windows NT 操作 系统 ; 

。 两 套 MyEclipse 7. 5 开发 环境 ; 

。 两 套 tomcat 服务 器 ; 

。 一 套 Flash CS4; 

。 一 套 Flash Media Server; 

。 两 套 Java SDK 6.0; 

。 一 套 SQL Server 2005; 

。 两 套 Microsoft Office 2007 。 

5. 测试 通过 \ 失 败 标准 

测试 通过 的 标准 表述 如 下 : 

。 所 有 的 接口 用 例 都 被 执行 过 并 通过 ; 

。 所 有 发 现 的 真实 缺陷 都 被 修正 并 回归 测试 ; 

。 newAdmin 接口 和 decode 接口 的 输入 域 被 100% 覆 盖 ; 

。 newAdmin 接口 和 decode 接口 的 函数 调用 路 径 被 100% 覆 羔 。 

测试 失败 的 标准 表述 如 下 : 

。 缺陷 密度 大 于 2 个 /KLOC; 

。 发现 有 重大 结构 设计 问题 ,其 修改 会 导致 20% 以 上 的 函数 接口 、 功 能、 模块 数量 的 变 
化 ,进一步 测试 相关 接口 已 经 无 意义 ; 

发 现 关键 功能 未 被 设计 ,该 功能 的 设计 会 导致 20% 以 上 的 函数 接口 、 功 能、 模块 数量 的 
变化 ,进一步 测试 相关 接口 已 经 无 意义 。 

6. 测试 对 象 

FlashRemoting 模块 tag_02 版 本 ; 

EncodePassword 模块 tag_03 版 本 ; 


。 界面 模块 tag_05 版 本 。 

7. 用 例 分 析 与 设计 

1) HDL_001_INT_004 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_001。 

(2) 被 测 特 性 : 

。 输入 管理 员 邮 箱 不 合法 时 ,注册 失败 ; 

。 输入 特定 参数 为 空 时 ,注册 失败 ; 

。 输入 参数 合法 时 ,注册 成 功 。 

(3) 测试 方法 : 分 析 newAdmin 的 函数 调用 关系 图 和 流程 图 ,从 newAdmin 函数 测试 知 
道 ,用 桩 对 EmailFormat、CheckSet 和 SendEmail 三 个 函数 进行 了 替代 。 因 此 ,对 于 
newAdmin 的 集成 来 说 ,关键 是 验证 newAdmin 与 EmailFormat、CheckSet 和 SendEmail 的 接 
口 是 否 与 预计 的 效果 相同 。 

(4) 测试 项 标识 如 表 5-5 所 示 。 


表 5-5 测试 项 标识 


测试 项 标识 符 


测试 项 描述 


优先 级 


IT_TD _001_001 


输入 特定 参数 为 空 的 情况 


IT_TD 001_002 


输入 管理 员 邮 箱 不 合法 的 情况 


IT_TD _001_003 


输入 参数 合法 的 情况 


驯 | 台 | 京 


(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 缺 陷 。 
(6) 对 应 的 测试 用 例如 表 5-6 一 表 5-8 所 示 。 


表 5-6 测试 用 例 


IT_TD_001_001 


测试 项 编号 


优先 级 


低 


测试 项 描述 


测试 特定 参数 为 空 的 错误 情况 


前 置 条 件 


管理 员 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 


用 例 序号 


输入 


期 望 结果 


001 


firstName= "Claude" 
lastName= "Strife" 
Password 一 "" 

eMail= "zacks_maill63. com” 
saluation 二 "先生 " 


Pivate_Key= "genocide" 


返回 false 
反馈 密码 不 能 为 空 的 错误 信息 


002 


firstName="" 

lastName 一 "Strife" 
Password= "992125gjl" 
eMail 一 "zacks_mail163. com" 
saluation 一 "先生 " 
Pivate_Key 一 "genocide" 


返回 false 
反馈 firstname 不 能 为 空 的 错误 信息 


续 表 


用 例 序 号 输入 期 望 结 果 


firstName= "Claude" 


lastName= "Strife" 


i Password= "992125gjl” 返回 false 
eMail= "zacks_maill63. com" 反馈 密 钥 不 能 为 空 的 错误 信息 
saluation 一 "先生 ” 
Pivate_Key="" 
表 5-7 测试 用 例 


测试 项 编号 | IT_TD 001 002 

优先 级 高 

测试 项 描述 ”| 测试 邮箱 参数 不 合法 的 错误 情况 

前 置 条 件 管理 员 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 
用 例 序号 输入 期 望 结果 


firstName= "Claude" 


lastName= "Strife" 
Password 一 "992125gjl" 返回 false 

eMail= "zacks_maill63. com" 反馈 邮箱 错误 的 错误 信息 
saluation 一 "先生 ” 


Pivate_Key= "genocide" 


001 


表 5-8 测试 用 例 
测试 项 编号 | IT_TD_001_003 

优先 级 高 

测试 项 描述 ”| 测试 参数 合法 的 情况 

前 置 条 件 管理 员 单 击 “ 注 册 ” 按 钮 ,进入 注册 界面 

用 例 序号 输入 期 望 结果 


firstName= "Claude”" 


lastName 一 "Strife” 
Password 一 "992125gjl” 返回 User_ID 
eMail= "zacks_mail@163. com" 
saluation 二 "先生 " 


Pivate_Key= "genocide" 


001 


2) HDL_003_INT_002 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_002。 

(2) 被 测 特性 : 

。 输入 管理 员 密 钥 正确 的 情况 下 ,返回 解密 后 数据 库 中 的 密码 ; 

。 输入 管理 员 密 钥 错 误 的 情况 下 ,返回 解密 后 错误 的 编码 。 

(3) 测试 方法 : 分 析 decode 的 函数 调用 关系 图 和 流程 图 .从 loginAdmin 函数 测试 知道 ， 
用 桩 对 decode 进行 了 替代 。 因 此 ,对 于 decode 的 集成 来 说 ,关键 是 验证 loginAdmin 与 
decode 的 接口 是 否 与 预计 的 效果 相同 。 


(4) 测试 项 标识 如 表 5-9 所 示 。 
表 5-9 测试 项 标识 


测试 项 标识 符 测试 项 描述 优先 级 
IT_TD 002_001 输入 密 钥 错误 的 情况 高 
IT_TD_002_002 输入 密 钥 为 空 的 情况 高 
(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 缺 陷 。 
(6) 对 应 的 测试 用 例如 表 5-10 和 表 5-11 所 示 。 
表 5-10 测试 用 例 
测试 项 编号 IT_TD 002_001 
优先 级 高 
测试 项 描述 ”| 测试 管理 员 登 录 密 钥 为 空 情况 
前 置 条 件 网 站 管理 员 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 
用 例 序号 输入 期 望 结 果 
userName 一 "HA00000000001"” 
001 userPassword 一 "992125gjl” 返回 false 
Private_Key=" " 
表 5-11 测试 用 例 
测试 项 编号 | IT_TD_002_002 
优先 级 高 
测试 项 描述 ”| 测试 管理 员 登 录 密 钥 不 为 空 的 情况 
前 置 条 件 网 站 管理 员 单 击 “ 登 录 ” 按 钮 ,进入 登录 界面 
用 例 序号 输入 期 望 结果 
userName=" HA00000000001" 
001 userPassword 一 "992125gjl” 返回 经 解密 算法 解密 后 的 字 节 流 
Private_Key 一 "genocidc” 


3) GUI_INT_001 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_003 。 

(2) 被 测 特性 : 主页 面 会 员 登 录 界 面 设 置 接口 。 

(3) 测试 方法 : 检测 输入 的 合法 会 员 账号 .密码 是 否 能 够 正确 地 传递 给 loginUser 接口 函 
数 。 检 测 输入 的 验证 码 为 空 时 ,是 否 能 正确 提示 出 错 信息 。 检 测 接口 输出 的 正确 性 分 为 两 个 
方面 : 一 方面 ,验证 能 否 正确 获取 loginUser 的 返回 值 ; 另 一 方面 ,能 够 正确 获取 到 错误 信息 
并 显示 给 用 户 。 


(4) 测试 项 标识 如 表 5-12 所 示 。 
表 5-12 测试 项 标识 
测试 项 标识 符 测试 项 描述 优先 级 
IT_TD 003_001 验证 接口 的 输入 正确 性 高 
IT_TD_003_002 验证 返回 值 处 理 的 正确 性 高 
IT_TD_003_003 验证 错误 信息 捕获 的 正确 性 高 


(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 缺 陷 。 

(6) 对 应 测试 用 例 : 略 。 

4) GUI INT_002 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_004。 

(2) 被 测 特性 : 主页 面 注册 新 会 员 界 面 设置 接口 。 

(3) 测试 方法 : 检测 输入 的 合法 注册 信息 是 否 能 够 正确 地 传递 给 newUser 接口 函数 。 检 
测 输 入 的 必 填 项 为 空 时 ,是 否 能 正确 提示 出 错 信息 。 检 测 接口 输出 的 正确 性 分 为 两 个 方面 : 
一 方面 ,验证 能 否 正确 获取 newUser 的 返回 值 ; 另 一 方面 ,能 够 正确 获取 到 错误 信息 并 显示 
给 用 户 。 

(4) 测试 项 标识 如 表 5-13 所 示 。 


表 5-13 ”测试 项 标识 


测试 项 标识 符 测试 项 描述 优先 级 
IT_TD 004_001 验证 接口 的 输入 正确 性 高 
IT_TD_004_002 验证 返回 值 处 理 的 正确 性 高 
IT_TD_004_003 验证 错误 信息 捕获 的 正确 性 高 


(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 

(6) 对 应 测试 用 例 : 略 。 

5) GUI_INT_003 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_005 。 

(2) 被 测 特性 : 注册 新 会 员 称 谓 选 择 设置 接口 。 

(3) 测试 方法 : 检测 称谓 下 拉 框 中 选择 的 数据 是 否 能 够 正确 地 传递 给 newUser 接口 函 
。 检 测 是 否 允 许 不 选择 称谓 。 检 测 是 否 会 显示 给 用 户 正确 的 提示 信息 。 


(4) 测试 项 标识 。 


如 表 5-14 所 示 。 
表 5-14 测试 项 标识 


测试 项 标识 符 测试 项 描述 优先 级 
IT_TD_005_001 验证 接口 的 输入 正确 性 高 
IT_TD 005_002 验证 提示 信息 显示 的 正确 性 高 


(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 

(6) 对 应 测试 用 例 : 略 。 

6) GUI_INT_004 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_006 。 

(2) 被 测 特性 : 注册 新 会 员 重复 密码 匹配 检查 结果 显示 接口 。 

(3) 测试 方法 : 检测 重复 输入 的 密码 与 第 一 次 输入 的 密码 不 匹配 时 的 错误 信息 是 否 能 够 
正确 显示 给 用 户 。 

检测 两 次 输入 密码 匹配 时 ,是 否 能 将 密码 数据 正确 地 传递 给 newUser 接口 函数 。 

(4) 测试 项 标识 如 表 5-15 所 示 。 


表 5-15 测试 项 标识 


测试 项 标识 符 测试 项 描述 优先 级 
IT_TD 006_001 验证 接口 的 输入 正确 性 高 
IT_TD 006_002 验证 错误 信息 捕获 的 正确 性 高 


(5) 测试 通过 \ 失 败 标 准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 

(6) 对 应 测试 用 例 : 略 。 

7) GUIL_ INT _005 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_007 。 

(2) 被 测 特性 : 会 员 详 细 信息 界面 设置 接口 。 

(3) 测试 方法 : 检测 输入 的 合法 注册 信息 是 否 能 够 正确 地 传递 给 newUser 接口 函数 。 检 
测 输入 的 必 填 项 为 空 时 ,是 否 能 正确 提示 出 错 信息 。 检 测 接口 输出 的 正确 性 分 为 两 个 方面 : 
一 方面 ,验证 能 否 正确 获取 newUser 的 返回 值 ; 另 一 方面 ,能 够 正确 获取 到 错误 信息 并 显示 
给 用 户 。 

(4) 测试 项 标识 如 表 5-16 所 示 。 


表 5-16 测试 项 标识 


测试 项 标识 符 测试 项 描述 优先 级 
IT_TD_007_001 验证 接口 的 输入 正确 性 高 
IT_TD_007_002 验证 返回 值 处 理 的 正确 性 高 
IT_TD_007_003 验证 错误 信息 捕获 的 正确 性 高 


(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 
(6) 对 应 测试 用 例 : 略 。 
8) GUI_INT_006 测试 分 析 与 设计 
(1) 设计 标识 符 : IT_TD_008。 
(2) 被 测 特性 : 登录 成 功 之 后 欢迎 界面 设置 接口 。 
(3) 测试 方法 : 检测 登录 成 功 时 是 否 能 正确 调用 欢迎 界面 。 
(4) 测试 项 标识 : 如 表 5-17 所 示 。 
表 5-17 测试 项 标识 
测试 项 标识 符 测试 项 描述 优先 级 
IT_TD 008_001 验证 接口 调用 的 正确 性 高 


(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没 有 发 现 错误 。 

(6) 对 应 测试 用 例 : 略 。 

9) GUI_INT_007 测试 分 析 与 设计 

(1) 设计 标识 符 : IT_TD_009。 

(2) 被 测 特性 : 显示 最 后 一 次 登录 时 间接 口 。 

(3) 测试 方法 : 检测 接口 输出 的 正确 性 ,能 够 正确 获取 到 返回 信息 并 显示 给 用 户 。 
(4) 测试 项 标识 如 表 5-18 所 示 。 

(5) 测试 通过 \ 失 败 标准 : 所 有 的 用 例 都 必须 被 执行 , 且 没有 发 现 错误 。 


表 5-18 测试 项 标识 


测试 项 标识 符 


测试 项 描述 


优先 级 


IT_TD 009_001 


验证 信息 捕获 并 显示 的 正确 性 


(6) 对 应 测试 用 例 : 略 。 
8. 消息 调用 图 及 覆盖 率 


图 5-14 是 FlashRemoting 模块 和 EncodePassword 模块 之 间 的 消息 调用 , package 
FlashRemoting 中 包含 有 FindPassWord. java、HotelLogin. java 和 MemberManage. java 三 个 
类 ,EncodePassword 模块 含有 一 个 Crypt 类 ,测试 这 两 模块 之 间 的 接口 需要 调用 JMail 类 方 


法 ,用 桩 代替 。 
x % IT_TD 002 001 001 
class HotelLogin IT_TD_002_002_002 
public static boolean 
LoginAdmin(String public class Crypt 
vserNamesString public static byte[] getKey() 
userPassword,String public static byte[] encode(byte[] input,byte[] key) 
Private_Key) EE 
A public static byte[] decode(byte[] input,byte[] key) 
public static boolean 
public static byte[] md5(byte[] input) 
Login(String » 
a public static String byte2hex(byte[] b) 
userName.String 
userPassword) 
public String 
loginFMS(String 
userName'String class MemberManage class JMail 
userPassword,String 
Private_Key) public static String public static boolean 
\ a newUser(String SendEmail(String 
firstName.,String toUser,String 
lastName,String Mail_Title,String 
pass Word,String Mail_Context) 
IT_TD 001.0 eMail,String salutation) 
01_001, 
IT_TD_001_0 public static String [we 
01_002, newAdmin(String IT_TD 001.0 
一 上 
IT_TD_001.0 firstName,String 03_001 
01_003, lastName,String 
IT_TD_001_0 passWord,String 
02_001 eMail,String 
salutation, String | IT_TD_001.0 
Private_Key) 03_001 
public static boolean 
-一 一 | 
emailFormat(String 
email) 
public static int 
CheckSet(int Set) 


5-14 ”模块 之 间 消 息 调用 图 


覆盖 率 分 析 表 如 表 5-19 所 示 。 


表 5-19 覆盖 率 分 析 表 


标 识 符 名 称 覆盖 率 (%) 

String newAdmin (String firstName, String lastName, String 

HLD 001_INT_004 . 和 . 和 . 100 
passWord, String eMail, String salutation, String Private_Key) 

HLD 003_INT 002 | byte[] decode(byte[ ] input,byte[] key) 100 

GUN_INT 001 主页 面 会 员 登 录 界 面 设置 接口 100 

GUN_INT_002 主页 面 注册 新 会 员 界 面 设置 接口 100 

GUN_INT_003 注册 新 会 员 称 谓 选择 设置 接口 100 

GUN_INT 004 注册 新 会 员 重复 密码 匹配 检查 结果 显示 接口 100 

GUN_INT_005 会 员 详 细 信 息 界面 设置 接口 100 

GUN_INT_006 登录 成 功 之 后 欢迎 界面 设置 接口 100 

GUN_INT_007 显示 最 后 一 次 登录 时 间接 口 100 

9. 测试 脚本 


下 面 列 出 在 集成 测试 过 程 中 用 到 的 函数 或 方法 桩 代码 。 


MyAuthenticator stub. java: 
package JMailPacket; 


import javax. mail.PasswordAuthentication; 


public class MyAuthenticator stub { 
private String strUser; 
private String strPwd; 


public MyAuthenticator_ stub() 


{ 


this. strUser = "zacks_mail(@163.com"; 
this. strPwd = "992125gj1"; 


} 


protected PasswordAuthentication getPasswordAuthentication() 


{ 


return new PasswordAuthentication(strUser, strPwd); 


} 
} 


EmailFormat_stub. java: 
package FlashRemoting; 


public class EmailFormat stub { 
public static boolean emailFormat (String email) 


{ 


return true; 


} 
} 


Crypt_stub. java: 


package EncodePassword; 


import java. security. *; 
import javax. crypto. *; 


public class Crypt_stub 


{ 
public static boolean STUB SUC = true; 
private static String Algorithm= "DES";  // 定 义 加 密 算法 ,可 用 DES, DESede, Blowfish 
static 
{ 
Security. addProvider(new com. sun. crypto. provider. SunJCE( ) ); 
} 


// 生 成 密 钥 ,注意 此 步骤 时 间 比 较 长 


public static byte[ ] getKey( ) throws Exception 

| 
KeyGenerator keygen = KeyGenerator.getInstance(Algorithm); 
SecretKey deskey = keygen. generateKey(); 
return deskey. getEncoded( ); 

} 


// 加 密 
public static byte[ ] encode(byte[ ] input, byte[ ] key) throws Exception 
{ 
String skey = new String(key); 
byte[ ] result = "false".getBytes(); 


if(FlashRemoting. NewUser_ UnitTest. CASE NUM. compareTo("IT TD 001 001 001") == 0) 


{ 
if(skey. compareTo("genocide") != 0) 
{ 
STUB_SUC = false; 
return result; 
} 
result = "992125gjl1". getBytes(); 
return result; 
} 


if( (FlashRemoting. NewUser_UnitTest. CRSE_NUM. compareTo("IT_TD 001_001_003") == 0) 
| (FlashRemoting. NewUser_UnitTest. CASE_ NUM. compareTo ("IT TD 001 001 002") == 0) 
| (FlashRemoting. NewUser UnitTest. CRSE_NUM. compareTb("IT TD 001_002 001") == 0)) 


{ 
if(skey. compareTo("genocidc") != 0) 
{ 
STUB_SUC = false; 
} 
return result; 
i 


if(FlashRemoting. NewUser UnitTest. CASE NUM. compareTo("IT TD 001 003 001") == 0)) 
{ 
if(skey. compareTo("genocide") != 0) 
{ 
STUB_SUC = false; 


return result; 


STUB SUC = false; 
return result; 


// 解 密 
public static byte[ ] decode(byte[ ] input, byte[ ] key) throws Exception 


String skey = new String(key); 
byte[ ] result = "false".getBytes(); 


if(FlashRemoting. Login UnitTest.CASE NUM.compareTo("IT TD 002 001 001") == 0) 


if(skey. compareTo("genocide") != 0) 
{ 

STUB SUC = false; 

return result; 


} 
result = "992125gjl1". getBytes(); 
return result; 


if(FlashRemoting. Login UnitTest.CASE NUM.compareTo("IT TD 002 002 001") == 0) 


{ 
if(skey. compareTo("genocidc") != 0) 
{ 
STUB_SUC = false; 
} 
return result; 
} 


STUB_SUC = false; 
return result; 


} 


//md5() 信 息 摘要 ,不可逆 
public static byte[ ] md5(byte[ ] input) throws Exception 
{ 
java. security. MessageDigest alg = java. security. MessageDigest. getInstance( "MD5"); 
// 或 "SHA-1" 
alg. update( input); 
byte[ ] digest = alg. digest(); 
return digest; 


} 


// 字 节 码 转换 成 十 六 进 制 字 符 串 
public static String byte2hex(byte[ ] b) 
{ 
String hs = "" 
String stmp= ""7 


} 


for (int n=0;n<b. length;n++) 
{ 
stmp= (java. lang. Integer. toHexString(b[n] & OXFF)); 
证 (stmp. length() ==1) 
hs= hs+"0"+ stmp; 
else 
hs= hs+ stmp; 
if (n<b. length—1) 
hs=hs+":"; 
} 
return hs. toUpperCase( ); 
} 


JMail_ stub. java: 


} 


package JMailPacket; 


public class JMail stub { 
public static boolean SendEmail(String toUser, String Mail Title, String Mail Context) 
{ 
return true; 


} 


10. 用 例 执行 及 报告 分 析 


测试 。 


. 分 析 集 成 测试 的 重点 及 集成 测试 回归 的 目的 。 
. 简要 说 明 集 成 测试 环境 的 创建 。 
. 分 析 结 构 化 开发 和 面向 对 象 开发 的 集成 测试 依据 。 
. 简 述 集成 测试 的 覆盖 指标 要 求 。 
. 分 别 用 自 顶 向 下 集成 、 自 底 向 上 集成 、 大 爆炸 集成 、 三 明治 集成 方法 完成 对 下 图 的 集成 
4 
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系统 测试 


在 第 1 章 中 对 系统 测试 作 了 简单 描述 ,本 章 将 对 系统 测试 作 详细 
分 析 。 


6.1 系统 测试 概述 


软件 只 是 计算 机 系统 中 的 一 个 组 成 部 分 ,软件 开发 完成 后 ,还 要 与 
系统 中 的 其 他 元 素 结合 起 来 才能 运行 ,这 些 元 素 包括 计算 机 硬件 .外 围 
设备 、 网 络 .操作 系统 等 。 所 以 系统 测试 是 在 整个 系统 投入 运行 之 前 ,对 
系统 的 各 元 素 进行 组 装 和 确认 测试 ,确保 在 系统 实际 运行 时 软件 、 硬 件 、 
外 设 、 网 络 等 系统 元 素 能 够 相互 配合 并 正常 工作 。 

系统 测试 的 类 型 有 很 多 ,系统 测试 除了 验证 系统 的 功能 外 ,还 会 涉 
及 安全 性 、 性 能 压力 、 可 用 性 、 可 靠 性 、 可 恢复 性 等 方面 的 测试 ,而 且 每 一 
种 测试 都 有 其 特定 的 目标 。 系 统 测试 对 于 开发 者 来 说 是 将 系统 交付 给 
用 户 之 前 的 最 后 一 道 防线 。 

系统 测试 属于 黑 盒 测试 范畴 ,不 需要 对 软件 的 源 代码 进行 分 析 , 但 
是 在 系统 测试 中 可 以 运用 白 盒 测试 的 思想 ,如 在 系统 测试 中 对 系统 业务 
路 径 的 分 析 就 是 白 盒 测试 思想 的 延伸 ,系统 的 业务 路 径 就 是 将 系统 不 同 
的 模块 或 不 同 的 子 系统 连接 起 来 形成 一 个 系统 业务 路 径 , 执 行 这 个 路 径 
也 就 实现 系统 的 某 项 功能 。 

系统 测试 一 般 由 测试 经 理 统一 组 织 、 制 定 系 统 测试 计划 ,测试 技术 人 
员 负 责 测 试 分 析 、 用 例 设计 、 开 发 测试 脚本 、 测 试 环境 的 搭建 ,测试 执行 等 
工作 。 系 统 测试 需要 有 完整 的 监控 过 程 ,完成 系统 测试 后 ,需要 提交 各 种 
系统 测试 文档 ,这 些 文档 包括 系统 测试 报告 缺陷 跟踪 管理 报告 等 。 

系统 测试 的 依据 是 系统 需求 规约 (说 明 书 ) 和 系统 需求 分 析 规约 (说 
明 书 )。 


6.2 系统 测试 环境 及 过 程 


1. 系统 测试 环境 
搭建 系统 测试 环境 是 系统 测试 实施 的 一 个 重要 阶段 ,测试 环境 适合 


与 否 直接 影响 系统 测试 结果 的 真实 性 和 正确 性 。 系 统 测试 环境 包括 硬件 环境 和 软件 环境 两 大 
部 分 ,硬件 环境 是 指 测试 必需 的 服务 器 、 客 户 端 网 络 连接 设备 以 及 打印 机 /扫描 仪 等 辅助 硬件 


设备 所 构成 的 环境 ; 软件 环境 是 指 被 测 软 件 运 行 时 的 操作 系统 数据库 及 其 他 工具 软件 、 应 用 


软件 构成 的 环境 。 


(1) 确定 系统 测试 环境 的 组 成 。 可 以 从 以 下 方面 考虑 。 

。 系统 测试 所 需 的 计算 机 数量 ,以 及 对 每 人 台 计 算 机 的 硬件 配置 要 求 ,包括 CPU 的 速度 、 
内 存 和 硬盘 的 容量 、 网 卡 所 支持 的 速度 。 

系统 测试 所 需 的 外 设 , 如 打印 机 数量 及 其 型 号 .ATM 机 数量 及 型 号 .条 形 码 读 码 器 数 
量 及 型 号 等 。 

部 署 被 测 应 用 的 服务 器 所 必需 的 操作 系统 、 数 据 库 管 理 系统 .中 间 件 \Web 服务 器 及 其 
他 必需 组 件 的 名 称 \ 版 本 ,以 及 所 要 用 到 的 相关 补丁 的 版 本 。 

用 来 保存 系统 测试 中 生成 的 文档 和 数据 的 服务 器 所 必需 的 操作 系统 、 数 据 库 管理 系 
统 、 中 间 件 、Web 服务 器 及 其 他 必需 组 件 的 名 称 、 版 本 ,以 及 所 要 用 到 的 相关 补丁 的 
版 本 。 

用 来 执行 测试 工作 的 计算 机 所 必需 的 操作 系统 数据库 管理 系统 、 中 间 件 、Web 服务 器 
及 其 他 必需 组 件 的 名 称 、 版 本 ,以 及 所 要 用 到 的 相关 补丁 的 版 本 。 

是 否 需要 专门 的 计算 机 用 于 系统 测试 的 应 用 服务 器 环境 和 测试 管理 服务 器 环境 的 
备份 。 

系统 测试 中 所 需要 使 用 的 网 络 环 境 。 例 如 ,如 果 测 试 结 果 同 接 入 Internet 的 线路 的 稳 
定性 有 关 , 那 么 应 该 考虑 为 测试 环境 租用 单独 的 线路 ; 如 果 测 试 结果 与 局 域 网 内 的 网 
络 速度 有 关 , 那 么 应 该 保证 计算 机 的 网 卡 、 网 线 以 及 用 到 的 集线器 及 交换 机 都 不 会 成 
为 瓶颈 。 

。 必要 的 测试 工具 及 其 运行 的 操作 系统 .数据库 管理 系统 ,版 本 等 。 

(2) 管理 测试 环境 。 可 以 从 以 下 方面 考虑 。 

。 设置 专门 的 系统 测试 环境 管理 员 和 角色 。 测 试 环境 管理 员 ,其 主要 职责 是 测试 环境 的 拱 
建 。 包 括 操作 系统 .数据库 .中 间 件 `Web 服务 器 等 必需 软件 的 安装 ,配置 ,并 做 好 各 
项 安装 .配置 手册 的 编写 ; 设置 系统 测试 环境 的 各 台 机 器 的 硬件 配置 、IP 地 址 、 端 口 配 
管 , 机 器 的 具体 用 途 , 以 及 当前 网 络 环境 ; 系统 测试 环境 各 项 变更 的 执行 及 记录 ; 测试 
环境 的 备份 及 恢复 ; 操作 系统 、 数 据 库 、 中 间 件 、Web 服务 器 以 及 被 测 应 用 中 所 需 的 各 
用 户 名 、 密 码 以 及 权限 的 管理 。 

记录 好 系统 测试 环境 管理 所 需 的 各 种 文档 。 测 试 环境 的 各 台 机 器 的 硬件 环境 文档 , 测 
试 环 境 的 备份 和 恢复 方法 手册 ,记录 了 每 次 备份 的 时 间 、 备 份 人 、 备 份 原因 以 及 所 形成 
的 备份 文件 的 文件 名 和 获取 方式 的 文档 ; 用 户 权 限 管 理 文档 ,该 文档 记录 了 访问 操作 
系统 数据库 、 中 间 件 、Web 服务 器 以 及 被 测 应 用 时 所 需 的 各 种 用 户 名 、 密 码 以 及 各 用 
户 的 权限 ,并 对 每 次 变更 进行 记录 。 

测试 环境 访问 权限 的 管理 。 为 每 个 访问 系统 测试 环境 的 测试 人 员 和 开发 人 员 设 置 单 
独 的 用 户 名 和 和 密码。 访问 操作 系统 数据库、Web 服务 器 以 及 被 测 应 用 等 所 需 的 各 种 
用 户 名 密码 ,权限 ,由 测试 环境 管理 员 统 一 管理 ; 测试 环境 管理 员 拥 有 全 部 的 权限 ， 
开发 人 员 只 有 对 被 测 应 用 的 访问 权限 和 查看 系统 日 志 ( 只 读 ) ,测试 组 成 员 不 授予 删除 
权限 ,用 户 及 权限 的 各 项 维护 、 变 更 需要 记录 到 相应 的 “用 户 权 限 管理 文档 ”中 。 


。 测试 环境 的 备份 和 恢复 。 系 统 测试 环境 必须 是 可 恢复 的 ,否则 将 导致 原 有 的 测试 用 例 
无 法 执行 ,或 者 发 现 的 缺陷 无 法 重 现 ,最 终 使 测试 人 员 已 经 完成 的 工作 失去 价值 。 因 
此 ,应 当 在 测试 环境 (特别 是 软件 环境 ) 发 生 重大 变动 时 进行 完整 的 备份 ,例如 使 用 
Ghost 对 硬盘 或 某 个 分 区 进行 镜像 备份 。 
软件 测试 环境 搭建 以 后 ,在 系统 测试 过 程 中 会 存在 着 维护 和 更 新 ,对 改变 的 重要 配置 需要 
做 到 对 测试 环境 管理 文档 、 测 试 环境 的 备份 及 时 更 新 。 
2. 系统 测试 过 程 
和 集成 测试 一 样 , 系 统 测试 也 包含 不 同 的 阶段 ,一 般 可 以 把 系统 测试 划分 为 5 个 阶段 : 计 
划 阶 段 .用例 分 析 和 设计 阶段 .实施 阶段 .执行 阶段 .分析 评 估 阶 段 。 在 实际 系统 测试 过 程 中 可 
能 其 阶段 有 所 不 同 ,读者 可 以 参考 IEEE 制定 的 相关 标准 。 
(1) 计划 阶段 。 
系统 测试 计划 的 好 与 坏 影响 着 后 续 测 试 工作 的 进行 ,系统 测试 计划 的 制定 对 系统 测试 的 
顺利 实施 起 着 至 关 重 要 的 作用 。 一 般 是 由 测试 经 理 依据 系统 需求 规约 和 系统 需求 分 析 规 约 并 
结合 项 目 计 划 来 制定 ,有 时 系统 测试 计划 也 需要 项 目的 管理 者 和 测试 技术 人 员 参 与 。 
系统 测试 计划 过 程 主要 分 为 两 个 阶段 : 计划 的 制定 阶段 和 评审 阶段 。 由 于 系统 测试 与 开 
发 过 程 可 以 同时 进行 ,因此 在 制定 系统 测试 计划 时 应 该 充分 考虑 到 总 体 开发 情况 和 总 体 测试 
计划 ,谨慎 地 选择 测试 环境 ,了 解 具体 要 求 。 在 系统 测试 计划 的 时 间 安 排 上 应 该 留 出 一 定 的 组 
冲 时 间 ,以 防 意外 的 风险 情况 发 生 时 措手不及 。 另 外 , 当 有 需求 变更 时 要 及 时 更 新 系统 测试 计 
划 。 系 统 测试 计划 一 般 会 涉及 以 下 内 容 : 
。 系统 测试 范围 与 主要 内 容 ; 
。 测试 技术 和 方法 ; 
。 测试 环境 与 测试 辅助 工具 ; 
。 系统 测试 的 进入 , 挂 起 和 恢复 及 完成 (退出 ?测试 的 准则 ; 
。 人 员 与 任务 ; 
。 缺陷 管理 与 跟踪 。 
(2) 用 例 分 析 和 设计 阶段 。 
本 阶段 工作 主要 由 测试 技术 人 员 来 完成 。 在 参考 系统 测试 计划 、 系 统 需求 规约 及 需求 分 
析 规 约 的 基础 上 ,对 系统 进行 测试 分 析 , 分 析 主 要 涉及 : 
。 系统 业务 及 业务 流 分 析 ; 
。 系统 级 别 的 接口 分 析 , 如 与 硬件 接口 、 与 其 他 系统 接口 ; 
。 系统 功能 分 析 ; 
。 系统 级 别 的 输入 和 输出 分 析 ; 
系统 级 别 的 状态 转换 分 析 ; 
。 系统 级 别 的 数据 分 析 , 如 ERD 分 析 ; 
。 系统 非 功 能 分 析 , 如 安全 性 、 可 用 性 方面 的 分 析 。 
然后 依据 分 析 的 结果 设计 测试 用 例 , 使 之 达到 指定 的 覆盖 指标 ,如 系统 主要 的 业务 流 覆 
盖 `. 所 有 的 功能 覆盖 等 。 测 试用 例 必须 经 过 严格 的 评审 。 
(3) 实施 阶段 。 
这 个 阶段 的 主要 工作 是 搭建 测试 环境 、 准 备 测 试 工 具 、 测 试 开 发 及 脚本 的 录制 ,可 能 还 会 
涉及 必要 的 相关 培训 ,如 工具 的 培训 等 。 另 外 ,本 阶段 需要 确定 系统 测试 的 软件 版 本 基线 ,如 


在 CVS 工具 中 可 以 通过 设置 版 本 标签 来 实现 。 

(4) 执行 阶段 。 

本 阶段 主要 是 完成 测试 用 例 的 执行 .记录 问题 跟踪 修改 等 工作 。 如 果 用 例 的 执行 是 通过 
工具 来 支撑 的 ,那么 需要 进行 测试 脚本 的 回放 并 记录 执行 结果 ,如 性 能 压力 测试 .并 发 性 测试 
等 需要 借助 工具 才能 完成 。 本 阶段 需要 严格 遵循 制定 的 测试 规程 ,必要 时 会 涉及 系统 的 回归 
测试 。 

(5) 分 析 评 估 阶 段 。 

当 系统 测试 执行 结束 后 ,要 召集 相关 人 员 , 如 测试 设计 人 员 、 系 统 设计 人 员 等 对 测试 结果 
进行 评估 ,形成 一 份 系统 测试 分 析 报 告 。 测 试 结果 数据 来 源 于 手工 记录 或 自动 化 工具 的 记录 ， 
以 确定 系统 测试 是 否 通过 。 评 估 的 内 容 一 般 涉 及 : 

。 测试 用 例 的 有 效 性 , 即 测试 用 例 本 身 可 能 存在 不 足 、 用 例 执行 的 成 功率 等 。 

。 测试 的 覆盖 情况 ,如 是 否 达到 规定 的 覆盖 指标 。 

。 缺陷 跟踪 与 解决 的 情况 。 


6.3 系统 测试 类 型 


系统 测试 有 别 于 单元 测试 和 集成 测试 ,除了 系统 测试 的 对 象 是 针对 整个 系统 之 外 ,还 在 于 
系统 测试 一 般 不 仅仅 是 基于 功能 方面 的 测试 ,还 会 涉及 其 他 非 功 能 性 方面 的 测试 。 在 第 1 章 
对 软件 测试 的 类 型 作 了 简单 分 析 , 本 节 将 从 系统 测试 的 角度 重点 描述 系统 测试 的 主要 测试 
类 型 。 

1. 功能 测试 (Functional Test) 

功能 测试 是 系统 测试 必须 完成 的 ,是 系统 测试 中 最 基本 的 测试 工作 ,属于 黑 盒 测试 技术 范 
畴 。 其 主要 的 测试 依据 是 系统 需求 规格 说 明 书 和 系统 需求 分 析 说 明 书 ,验证 产品 是 否 符合 功 
能 需求 。 所 以 对 系统 功能 的 测试 人 员 的 基本 要 求 是 ， 

。 充分 了 解 需求 规约 和 需求 分 析 规约 ,尤其 是 功能 需求 规约 ; 

。 掌握 一 定 的 测试 方法 ; 

。 具有 一 定 的 测试 经 验 。 

在 充分 了 解 需求 规约 和 需求 分 析 规约 的 基础 上 对 系统 所 有 的 功能 进行 分 析 , 包 括 隐 含 的 
功能 需求 并 加 以 标识 ; 分 析 功 能 的 正常 情况 和 功能 异常 情况 并 分 类 标识 ; 对 功能 划分 优先 
级 ,按照 优先 级 确定 测试 的 先后 顺序 和 测试 的 详细 程度 ,如 网 上 机 票 订 购 系统 ,其 订 票 功能 、 退 
票 功能 为 主要 功能 ,而 整个 页 面 的 布局 设置 就 是 相对 次 要 的 功能 ; 对 每 个 功能 进行 测试 分 析 ， 
分 析 其 可 测 性 ,采用 何 种 方法 测试 ,测试 的 前 提 条 件 , 可 能 的 输入 和 交互 ,预期 输出 等 ; 是 否 需 
要 借助 于 测试 工具 来 实现 测试 ,工具 使 用 的 程度 , 即 哪些 功能 用 手工 测试 ,哪些 使 用 自动 化 测 
试 工 具 。 如 需要 捕捉 功能 执行 过 程 中 的 变量 值 就 需要 工具 支撑 。 

功能 测试 是 系统 测试 的 核心 工作 ,用 例 的 设计 至 关 重要 ,常见 的 设计 方法 有 : 

。 基于 规约 的 方法 , 即 规约 导出 法 ; 

。 等 价 类 划分 法 ; 

。 边界 值 分 析 法 ; 

。 因果 图 ; 

。 判定 表 ; 


。 正 交 实 验 设 计 ; 

。 基于 风险 的 测试 ; 

。 错误 猜测 法 ; 

。 场景 法 ; 

。 业务 流 分 析 法 。 

功能 测试 除 考 虑 要 选取 合适 的 测试 方法 之 外 ,功能 测试 用 例 的 编写 要 规范 ,测试 用 例 需 要 
评审 ,这 便于 测试 过 程 的 监控 和 管理 ,提高 测试 工作 的 效率 ,也 便于 进行 功能 测试 的 回归 。 


2. 性 能 和 压力 测试 (Performance Test and Stress Test) 

系统 的 性 能 和 压力 是 系统 测试 的 又 一 个 重点 ,将 在 第 9 章 中 作 详 细 阐 述 。 

3. 容量 测试 

一 定 程度 上 容量 测试 可 以 看 作 是 性 能 测试 的 一 部 分 ,这 里 主要 针对 数据 的 容量 进行 分 析 。 
这 里 的 容量 测试 是 面向 数据 的 ,是 在 系统 能 正常 运行 的 情况 下 进行 的 ,以 确定 系统 是 否 能 够 处 
理 一 定 容量 的 数据 。 也 就 是 观察 系统 承受 超额 数据 容量 的 能 力 。 

容量 测试 可 以 参考 以 下 步骤 : 

(1) 分 析 系 统 的 所 有 外 部 数据 源 , 然 后 进行 分 类 ; 对 每 类 数据 源 分 析 可 能 的 容量 限制 ; 对 
于 记录 类 型 数据 需要 分 析 记 录 长 度 限 制 . 记 录 中 每 个 域 长 度 限制 和 记录 数量 限制 ; 对 每 个 类 
型 数据 源 ,构造 系统 峰值 的 大 容量 数据 对 系统 进行 测试 。 如 批量 代 发 工资 系统 中 代 发 工资 文 
件 中 记录 (人 数 ) 的 多 少 ,每 条 记录 的 长 度 限制 ; 图 形 处 理 系 统 中 读 入 的 图 像 文件 的 大 小 和 图 
形 文件 的 数量 。 

(2) 分 析 测 试 结 果 , 并 与 系统 的 期 望 值 比较 ,确定 系统 存在 的 容量 瓶颈 。 

(3) 对 系统 进行 优化 并 重复 进行 容量 测试 ,直到 系统 达到 期 望 的 容量 处 理 能 力 。 

常见 的 数据 容量 测试 有 数据 量 敏感 测试 ; 测试 编译 器 编译 能 力 ; 测试 链接 编辑 器 ; 模拟 
大 规模 模块 电路 ; 测试 操作 系统 任务 队列 满载 ; 测试 网 络 中 邮件 或 文件 满载 等 。 数 据 容量 测 
试 常用 的 测试 用 例 设计 方法 有 规约 导出 法 、 边 界 值 分 析 法 和 错误 猜测 法 。 

4. 安全 性 测试 

1) 概述 

根据 ISO8402 的 定义 ,安全 性 是 指 "使 伤害 或 损害 的 风险 限制 在 可 接受 的 水 平 内 ”。 所 以 
直观 地 说 ,系统 的 安全 性 是 系统 的 一 种 内 在 属性 。 安全 性 的 英文 术语 有 safety 和 security, 后 
者 主要 是 指 文件 数据 及 资料 的 保密 问题 。 系 统 的 安全 性 涉及 如 下 多 个 层面 : 

。 物理 层 安全 。 

。 网 络 层 安全 。 

。 操作 系统 层 安全 。 

。 应 用 程序 层 安全 。 


。 第 三 方 安全 。 
随 着 信息 化 的 普及 ,信息 安全 犯罪 在 当今 层出不穷 。 一 方面 ,要 用 法 律 和 道德 的 武器 来 约 
束 不 法 分 子 的 行为 ; 另 一 方面 ,要 对 那些 涉及 敏感 信息 以 及 容易 对 个 人 造成 伤害 的 信息 系统 


实施 必要 的 安全 防范 措施 。 由 于 系统 应 用 的 环境 以 及 业务 类 型 千差万别 ,如 基于 网 络 环境 的 
系统 、 基 于 销售 业务 的 系统 、 基 于 商业 机 密 以 及 人 事 管 理 系统 、 基 于 金融 方面 的 系统 都 存在 着 
这 样 或 那样 的 机 密 信息 。 一 个 完善 的 系统 应 该 具备 抵御 非法 或 非 正常 途径 的 人 侵 者 破坏 系统 


正常 工作 的 能 力 。 安 全 性 测试 就 是 检查 系统 对 非法 侵入 的 防范 能 力 ,测试 人 员 假扮 非法 入 侵 
者 ,采用 各 种 办 法 试图 突破 系统 的 防线 。 例 如 : 
。 想方设法 截取 或 破译 口令 。 
。 破坏 保护 客户 信息 的 软件 或 专门 开发 软件 来 破坏 系统 的 保护 机 制 。 
。 故意 导致 系统 失败 或 瘫痪 ,试图 趁 系 统 恢复 之 机 非法 进入 。 
。 试图 通过 浏览 非 保密 数据 推导 所 需 信息 等 。 
2) 安全 性 测试 方法 
(1) 功能 验证 。 
功能 验证 是 采用 软件 测试 当中 的 黑 盒 测试 方法 ,对 涉及 安全 的 软件 功能 ,如 用 户 管理 模 
块 . 权 限 管理 .加密 系统 .认证 系统 等 进行 测试 ,主要 验证 上 述 功能 是 否 有 效 。 

(2) 漏洞 扫描 。 

安全 漏洞 扫描 主要 是 借助 于 特定 的 漏洞 扫描 器 完成 的 。 通 过 使 用 漏洞 扫描 器 ,系统 管理 
员 能 够 发 现 系统 存在 的 安全 漏洞 ,从 而 在 系统 安全 中 及 时 修补 漏洞 的 措施 。 一 般 漏洞 扫描 分 
为 两 种 类 型 : 主机 漏洞 扫描 器 是 指 在 系统 本 地 运行 检测 系统 漏洞 的 程序 ; 网 络 漏洞 扫描 器 是 
指 基于 网 络 远程 检测 目标 网 络 和 主机 系统 漏洞 的 程序 。 

(3) 模拟 攻击 。 

对 于 安全 测试 来 说 ,模拟 攻击 测试 是 一 组 特殊 的 极端 的 测试 方法 ,我们 以 模拟 攻击 来 验证 

软件 系统 的 安全 防护 能 力 。 

3) 系统 安全 测试 的 内 容 

(1) 应 用 程序 安全 测试 。 

应 用 程序 的 安全 性 包括 对 数据 或 业务 功能 的 访问 ,在 预期 的 安全 性 情况 下 ,操作 者 只 能 访 

问 应 用 程序 的 特定 功能 有限 的 数据 。 其 测试 是 核实 操作 者 只 能 访问 其 所 属 用 户 类 型 已 被 授 
权 访 问 的 那些 功能 或 数据 。 测 试 时 ,确定 有 不 同 权 限 的 用 户 类 型 ,创建 各 用 户 类 型 并 用 各 用 户 
类 型 所 特有 的 事务 来 核实 其 权限 ,最 后 修改 用 户 类 型 并 为 相同 的 用 户 重新 运行 测试 。 应 用 程 
序 的 安全 性 问题 : 

。 功能 验证 : 有 效 的 密码 是 否 接受 ,无 效 的 密码 是 否 拒 绝 ; 系统 对 于 无 效用 户 或 密码 登 
录 是 否 有 提示 ; 用 户 是 否 会 自动 超时 退出 ,超时 的 时 间 是 否 合理 ; 各 级 用 户 权 限 划分 
是 否 合 理 。 

。 模拟 攻 击 : 系统 是 否 允 许 极 端 或 不 正常 的 登录 方式 访问 (如 不 通过 登录 页 面 ,直接 输 
入 URL, 看 其 是 否 能 够 进入 )。 

(2) 操作 系统 安全 测试 。 包 括 : 

。 账号 和 口令 : 对 主机 或 域 上 用 户 强制 进行 口令 复杂 度 ; 检查 系统 是 否 使 用 默认 管理 员 
账号 ; 检查 在 系统 中 是 否 存在 可 疑 或 与 系统 无 关 的 账号 ; 检查 系统 用 户 是 否 有 口令 最 
短 和 口令 长 度 要 求 ; 检查 系统 用 户 是 否 有 密码 过 期 策略 。 

。 网 络 与 服务 : 查看 主机 开放 的 共享 , 关 掉 不 必要 的 共享 和 系统 默认 的 共享 服务 ; 查看 
主机 进程 信息 (不 允许 系统 中 安装 有 与 应 用 服务 无 关 的 应 用 程序 ); 查看 系统 启动 的 
服务 列表 ; 查看 系统 启用 的 端口 号 ; 查看 系统 是 否 制定 操作 系统 的 备份 恢复 策略 
服务 。 

。 文 件 系 统 : 文件 系统 的 安全 主要 是 检查 主机 磁盘 分 区 类 型 和 某 些 特定 目录 的 权限 。 
注意 : 服务 器 应 使 用 具有 安全 特性 的 NTFS 格式 ,而 不 应 该 使 用 FAT 或 FAT32 分 区 


(上 述 描述 的 内 容 主 要 是 针对 Windows 操作 系统 ) 。 
。 日 志 审核 : 日 志 的 审核 主要 是 检查 主机 日 志 的 审核 情况 。 主 要 包括 应 用 程序 日 志 、 安 
全 日 志 (用 户 登录 系统 的 日 志 )、 系 统 日 志 。 
。 其 他 安全 设置 : 系统 补丁 漏洞 ; 登录 系统 操作 的 用 户 的 权限 ; 病毒 防治 ; 系统 日 志 是 
否 有 备份 功能 ; 数据 的 备份 与 恢复 ; 印 载 与 系统 无 关 组 件 或 应 用 程序 。 
(3) 数据 库 安全 。 
数据 库 安全 将 在 数据 库 测 试 一 节 详 细 描述 ,这 里 作 简 单 分 析 。 
在 管理 和 维护 数据 库 的 过 程 中 ,为 了 保障 数据 库 安全 ,从 以 下 几 方 面 限制 数据 库 的 访问 安 
全 ,以 Oracle 为 例 : 
。 限制 能 访问 Oracle 数据 库 的 客户 端 ,指定 的 卫 才 可 以 访问 ,防止 恶意 的 用 户 登录 。 
。 即使 有 访问 Oracle 数据 库 的 机 会 ,账户 的 密码 使 用 强 口令 和 其 他 登录 策略 ,恶意 用 户 
也 无 法 轻松 进入 。 
。 每 个 登录 账户 设置 了 合适 的 权限 ,执行 改变 数据 库 状 态 的 权限 需要 得 到 管理 员 的 授 
权 , 确 保 了 系统 合法 账户 对 数据 库 的 操作 安全 。 
(4) IIS 服务 器 安全 测试 。 
JIS 安全 测试 涉及 : 
。 IIS 基础 服务 组 件 安装 情况 (根据 系统 情况 合理 地 安装 ,减少 安装 不 必要 的 服务 控件 ) 。 
查看 IIS 日 志 是 否 启用 ,日 志 存 储 路 径 以 及 日 志 记录 选项 。 
IIS 主 目录 路 径 和 目录 访问 权限 的 设置 (注意 : 目录 建议 不 要 和 系统 盘 符 设置 在 同一 
路 径 下 ; 目录 访问 权限 根据 所 在 项 目 系统 的 实际 情况 来 设置 ,通常 只 启用 “ 读 取 ” 权 
限 , 记 录 访 问 和 索引 资料 权限 和 系统 的 安全 无 关 都 默认 启用 ,因为 所 用 的 Internet 用 
户 访问 的 目录 就 是 IIS 设 定 主 目录 ) 。 
默认 文档 的 启用 。 
访问 控制 的 身份 验证 。 
连接 超时 功能 的 设置 (可 以 根据 项 目的 安全 要 求 ,具体 可 参考 系统 需求 规格 说 明 书 来 
进行 合理 的 设置 ) 。 
。 安全 补丁 的 更 新 和 安装 情况 。 
(5) 网 络 环境 安全 测试 。 
网 络 环境 安全 测试 主要 检测 的 是 系统 所 在 的 网 络 环境 安全 设置 ,此 测试 可 以 根据 项 目 本 
身 的 情况 进行 。 网 络 安全 测试 时 需要 关注 以 下 方面 : 
备份 和 升级 情况 ; 
访问 控制 情况 ; 
。 网 络 服务 情况 ; 
。 路 由 协议 情况 ， 
。 日 志 审 核 情况 ; 
。 网 络 攻击 防护 情况 ; 
。 登录 标志 ; 
。 安全 管理 。 
5. 恢复 性 测试 
软件 测试 不 可 能 发 现 软 件 中 的 所 有 缺陷 ,可 恢复 测试 (Recovery Testing) 是 测试 一 个 系统 


能 否 从 灾难 或 出 错 中 很 好 地 恢复 的 过 程 , 即 验证 系统 从 软件 或 者 硬件 失败 中 恢复 的 能 力 。 恢 
复 测试 一 般 是 通过 人 为 的 各 种 强制 性 手段 让 系统 出 现 故 障 ,然后 检测 系统 是 否 能 正确 地 恢复 
(自动 恢复 和 人 工 恢 复 )。 简 单 地 说 ,可 恢复 测试 是 一 种 对 抗 性 的 测试 过 程 。 在 测试 中 把 应 上 
程序 或 系统 置 于 极端 的 条 件 下 或 是 模拟 的 极端 条 件 下 产生 故障 ,然后 调用 恢复 进程 ,并 监测 、 
检查 和 核实 应 用 程序 和 数据 能 否 得 到 正确 的 恢复 。 

可 恢复 测试 通常 需要 关注 恢复 所 需 的 时 间 以 及 恢复 的 程度 。 例 如 , 当 系 统 出 错时 能 否 在 
指定 时 间 间 隔 内 修正 错误 并 重新 启动 系统 。 而 对 于 需要 人 工 干预 的 恢复 系统 ,还 需 估 计 平 均 
修复 时 间 ,确定 其 是 否 在 可 接受 的 范围 内 。 

因此 , 随 着 网 络 应 用 、 电 子 商 务 及 电子 政务 越 来 越 普及 ,系统 可 恢复 性 也 显得 越 来 越 重 要 ， 
可 恢复 性 对 系统 的 稳定 性 、 可 靠 性 影响 很 大 。 但 可 恢复 性 测试 很 容易 被 忽视 ,因为 可 恢复 测试 
的 实施 相对 来 说 比较 难 , 一 般 情 况 下 是 很 难 设想 出 让 系统 出 错 和 发 生 灾难 性 的 错误 ,这 需要 足 
够 的 时 间 和 精力 ,也 需要 得 到 更 多 的 设计 人 员 、 开 发 人 员 的 参与 。 

在 进行 恢复 性 测试 时 ,首先 要 进行 恢复 性 测试 的 分 析 ,一般 需 要 考虑 以 下 几 个 方面 : 

。 恢复 的 策略 ; 

。 恢复 的 程度 ; 

。 恢复 期 间 的 安全 性 ,如 数据 的 安全 ; 

。 按 日 志 恢 复 的 能 力 ， 

。 当 出 现 供电 问题 时 的 恢复 能 力 ; 

。 恢复 的 时 间 长 短 ; 

。 恢复 操作 后 系统 性 能 是 否 下 降 。 

常用 的 恢复 性 测试 用 例 设 计 方 法 有 规约 导出 法 、 错 误 猜 测 法 、 基 于 故障 的 测试 .模拟 场 
景 法 。 

6. 备份 测试 

备份 可 能 涉及 数据 库 备份 ,文件 系统 备份 及 操作 系统 备份 等 ,但 主要 是 指数 据 库 备份 。 备 
份 测试 主要 是 系统 的 备份 能 力 及 验证 系统 在 软件 、 硬 件 、 网 络 等 方面 出 问题 时 的 备份 数据 的 恢 
复 能 力 , 它 属于 恢复 性 测试 的 一 个 部 分 。 备 份 测试 可 以 从 以 下 方面 来 做 分 析 : 备份 文件 ,并 同 
最 初 的 文件 进行 比较 ; 文件 和 数据 的 存储 ; 完整 的 备份 过 程 ; 备份 是 否 引起 系统 性 能 的 降低 ; 
手工 操作 过 程 备份 的 有 效 性 ; 备份 期 间 的 安全 性 ; 备份 期 间 维护 处 理 日 志 的 完整 性 。 

7. 健壮 性 测试 

健壮 性 测试 又 被 称 为 容错 性 测试 ,不 同 于 恢复 性 测试 。 容 错 测 试 一 般 是 输入 异常 数据 或 
进行 异常 操作 ,以 检验 系统 的 保护 性 。 如 果 系 统 的 容错 性 好 的 话 ,系统 会 给 出 提示 或 内 部 消化 
掉 , 而 不 会 导致 系统 出 错 甚至 崩溃 。 而 可 恢复 测试 是 通过 各 种 手段 ,让 软件 强制 性 地 发 生 故 
障 , 然 后 验证 系统 已 保存 的 用 户 数据 是 否 丢失 、 系 统 和 数据 是 否 能 很 快 恢复 。 因 此 ,可 恢复 测 
试 和 容错 测试 是 互补 的 关系 ,可 恢复 测试 也 是 检查 系统 容错 能 力 的 方法 之 一 。 

所 以 ,健壮 性 测试 主要 是 测试 系统 是 否 具 有 良好 的 健壮 性 ,要 求 设计 人 员 在 做 系统 设计 时 
必须 周密 细致 ,尤其 要 注意 妥善 地 进行 系统 异常 的 处 理 。 实 际 上 很 多 开发 项 目 在 设计 的 过 程 
中 ,设计 者 很 容易 忽略 系统 关于 容错 方面 的 功能 ,这 些 多 半 受 到 开发 者 的 能 力 、 经 验 、 时 间 、 人 
力 ,物力 等 的 限制 。 因 此 系统 容错 性 差 也 成 为 目前 软件 危机 中 的 一 个 主要 原因 。 不 具备 容错 
性 能 的 系统 不 是 一 个 优秀 的 系统 ,在 市 场 上 也 很 难 被 用 户 所 接纳 。 

健壮 性 测试 常用 的 方法 是 系统 故障 插入 测试 ,模拟 在 硬件 、 软 件 、 网 络 等 方面 出 现 故 障 的 


情况 并 且 观 察 系统 行为 。 
健壮 性 测试 设计 的 常用 方法 有 故障 插入 测试 .场景 法 、 错 误 猜 测 法 等 。 
8. 兼容 性 测试 
兼容 性 测试 将 验证 软件 与 其 所 依赖 的 环境 的 依赖 程度 ,包括 对 硬件 的 依赖 程度 ,对 平台 软 
件 、 其 他 软件 的 依赖 程度 等 。 兼 容 性 测试 需要 在 各 种 各 样 的 软 硬 件 环境 下 进行 ,测试 中 的 硬件 
环境 是 指 进行 测试 所 必需 的 服务 器 、 客 户 端 . 网 络 链接 设备 以 及 打印 机 、 扫 描 仪 等 辅助 硬件 设 
备 所 构成 的 环境 ; 软件 环境 则 是 指 被 测 软件 运行 所 需 的 操作 系统 .数据库 .中 间 件 、 浏 览 器 及 
与 被 测 软件 共 存 的 其 他 应 用 软件 等 构成 的 环境 。 在 兼容 性 测试 时 遇 到 测试 环境 准备 上 的 问 
题 ,可 以 尝试 以 下 几 种 方法 : 
。 向 硬件 厂商 租用 或 借用 ; 
。 采用 试用 版 软件 ; 
。 在 条 件 完善 的 专业 测试 实验 室 里 完成 测试 。 
兼容 性 测试 内 容 包 括 : 
。 硬件 兼容 性 测试 : 所 有 软件 都 需要 向 用 户 说 明 其 运行 的 硬件 环境 ,对 于 多 层次 结构 的 
软件 系统 来 说 ,需要 分 别 说 明 其 服务 器 端 、. 客 户 端 以 及 网 络 所 需 的 环境 。 兼 容 性 测试 
就 是 确认 这 些 对 于 硬件 环境 是 否 正确 合理。 包括 与 整 机 的 兼容 性 (CPU 内存、 硬 
盘 ); 与 板 卡 及 配件 的 兼容 性 ; 与 打印 机 的 兼容 性 ; 其 他 方面 硬件 的 兼容 性 等 。 
。 软件 兼容 性 测试 : 与 操作 系统 的 兼容 性 ,如 检测 被 测 系统 是 否 能 运行 于 不 同 的 操作 系 
统 环境 ; 与 数据 库 的 兼容 性 ,如 检测 被 测 系统 是 否 可 以 和 不 同 的 数据 库 交 换 数据 ; 与 
中 间 件 的 兼容 性 ; 与 浏览 器 的 兼容 性 ; 与 其 他 软件 的 兼容 性 。 
。 数据 兼容 性 测试 : 不 同 数据 格式 的 兼容 性 ; XML 符合 性 等 。 
*。 平台 化 软件 兼容 性 测试 。 
。 新 旧 系统 数据 迁移 测试 。 
所 以 ,在 做 兼容 性 测试 时 ,应 主要 关注 如 下 几 个 方面 的 问题 : 
。 系统 可 能 运行 在 哪些 不 同 的 操作 系统 环境 下 ? 
。 系统 可 能 与 哪些 不 同类 型 的 数据 库 进行 数据 交换 ? 
。 系统 可 能 运行 在 哪些 不 同 的 硬件 配置 的 环境 下 ? 如 硬件 的 型 号 不 同 、 硬 件 的 生产 商 不 
同等 。 
。 系统 可 能 需要 与 哪些 软件 系统 协同 工作 ? 这 些 软件 系统 可 能 的 版 本 有 哪些 ? 
并 不 是 每 个 系统 都 要 进行 所 有 兼容 性 项 目的 测试 。 对 于 定制 系统 来 说 ,兼容 性 测试 应 尽 
早 进 行 ,否则 系统 投入 使 用 后 , 随 着 系统 中 数据 的 增多 ,兼容 性 测试 的 风险 和 投入 将 越 来 越 大 。 
9. 可 用 性 测试 
可 用 性 测试 是 指 让 有 代表 性 的 用 户 尝 试 对 产品 进行 典型 操作 ,同时 ,观察 员 及 开发 人 员 在 
一 旁观 察 .聆听 并 做 记录 。 所 以 ,可 用 性 测试 一 般 是 面向 用 户 的 系统 测试 ,有 时 也 是 面向 原型 
的 测试 。 测 试 的 重点 是 系统 的 功能 、 系 统 的 业务 、 帮 助 等 。 
可 用 性 测试 方法 包括 : 
(1) 认 知 预演 (Cognitive Walkthroughs) 。 
是 由 Wharton 等 (1990) 提 出 的 ,该 方法 首先 要 定义 目标 用 户 、 代 表 性 的 测试 任务 .每 个 任 
务 正确 的 行动 顺序 、 用 户 界面 ,然后 进行 行动 预演 并 不 断 地 提出 问题 ,包括 用 户 能 否 达 到 任务 
目的 ,用 户 能 否 获得 有 效 的 行动 计划 ,用 户 能 否 采用 适当 的 操作 步骤 ,用 户 能 否 根据 系统 的 反 


馈 信 息 评价 是 否 完成 任务 ,最 后 进行 评论 ,诸如 要 达到 什么 效果 , 某 个 行动 是 否 有 效 , 某 个 行动 
是 否 恰 当 , 某 个 状况 是 否 良好 。 该 方法 的 优点 在 于 能 面向 原型 。 该 方法 的 缺点 在 于 评价 人 不 
是 真实 的 用 户 ,不 能 很 好 地 代表 用 户 。 

(2) 启发 式 评估 (Heuristic Evaluation)。 

由 Nielsen 和 Molich(1990) 提 出 ,由 多 位 评价 人 (通常 是 4 一 6 人 ) 根 据 可 用 性 原则 反复 浏 
览 系统 各 个 界面 ,独立 评估 系统 ,人 允许 各 位 评价 人 在 独立 完成 评估 之 后 讨论 各 自 的 发 现 ,共同 
找 出 可 用 性 问题 。 该 方法 的 优点 在 于 专家 决断 比较 快 、 使 用 资源 少 ,能 够 提供 综合 评价 ,评价 
机 动 性 好 。 但 是 也 存在 不 足 之 处 : 一 是 会 受到 专家 的 主观 影响 ; 二 是 没有 规定 任务 ,会 造成 
专家 评估 的 不 一 致 ; 三 是 评价 后 期 阶段 ,由 于 评价 人 的 原因 造成 可 信 度 降低 ; 四 是 专家 评估 
与 用 户 的 期 待 存在 差距 ,所 发 现 的 问题 仅 能 代表 专家 的 意见 。 

(3) 用 户 测试 法 (User Test) 。 

就 是 让 用 户 真正 地 使 用 软件 系统 ,由 实验 人 员 对 实验 过 程 进 行 观察 ,记录 和 测量 。 这 种 方 
法 可 以 准确 地 反馈 用 户 的 使 用 表现 、 反 映 用 户 的 需求 ,是 一 种 非常 有 效 的 方法 。 用 户 测试 可 分 
为 实验 室 测试 和 现场 测试 。 实 验 室 测试 是 在 可 用 性 测试 实验 室 里 进行 的 ,而 现场 测试 是 由 可 
用 性 测试 人 员 到 用 户 的 实际 使 用 现场 进行 观察 和 测试 。 用 户 测试 之 后 ,评估 人 员 需 要 汇编 和 
总 结 测试 中 获得 的 数据 ,例如 完成 时 间 的 平均 值 .中 间 值 .范围 和 标准 偏差 ,用 户 成 功 完成 任务 
的 百分比 等 ,然后 对 数据 进行 分 析 , 并 根据 问题 的 严重 程度 和 紧急 程度 排序 ,撰写 最 终 测试 报告 。 

可 用 性 测试 的 设计 的 主要 方法 有 规约 导出 法 、 错 误 猜 测 法 和 场景 法 等 。 

10. 可 安装 性 测试 

可 安装 性 测试 的 目的 就 是 要 验证 成 功 安装 系统 的 能 力 。 安 装 系统 处 在 一 个 开发 项 目的 结 
东 , 也 是 被 测 系统 运行 的 开始 。 顺 利安 装 系统 会 给 用 户 一 个 良好 的 印象 。 所 以 安装 过 程 需要 
简单 明了 ,并 且 相 关 的 文档 要 求 同 样 的 直观 简洁 。 随 着 软件 产品 的 日 益 丰 富 , 可 获得 软件 的 途 
径 也 多 种 多 样 , 软 件 的 安装 方式 也 发 生 了 很 大 的 变化 ,有 系统 软件 的 安装 、 应 用 软件 的 安装 、 服 
务 器 的 安装 、 客 户 端 的 安装 ,还 有 产品 的 升级 安装 等 。 

安装 测试 时 要 注意 以 下 几 点 : 

。 是 否 需 要 专业 人 员 安 装 。 需 要 专业 人 员 安 装 的 软件 通常 只 有 Readme 文档 ,或 者 安装 
说 明 书 相对 简单 ,依赖 安装 人 员 的 专业 水 平 。 测 试 的 工作 量 相 对 较 小 。 需 要 普通 用 户 
自行 安装 的 软件 则 必须 提供 安装 说 明 书 ,并 必须 以 其 为 基础 展开 安装 测试 。 
软件 的 安装 说 明 书 有 无 对 安装 环境 作 限 制 和 要 求 。 至 少 在 标准 配置 和 最 低 配置 两 种 
环境 下 安装 。 曾 经 有 过 这 样 的 例子 , 某 客户 端 产 品 进行 安装 测试 时 十 分 顺利 ,在 准备 
发 布 之 前 的 一 次 演示 中 , 按 安装 说 明 书 进行 安装 时 意外 发 现 无 法 通过 ,提示 没有 安装 
相关 Java 程序 包 。 真 正 的 原因 就 是 测试 人 员 的 测试 用 机 都 按 习 惯 在 装 操作 系统 时 默 
认 安 装 了 相关 Java 程序 包 , 造 成 了 测试 上 的 朴 漏 。 
安装 过 程 是 否 简 单 .容易 掌握 。 软 件 的 安装 说 明 书 与 实际 安装 步骤 是 否 一 致 。 对 一 般 
用 户 而 言 ,长 长 的 安装 文档 ,复杂 的 操作 步骤 往往 造成 是 惧 心 理 。 如 果实 际 步骤 与 安 
装 说 明 上 有 出 入 ,就 容易 让 用 户 缺 乏 信心 ,增加 技术 支持 的 成 本 。 
安装 过 程 是 否 有 明显 的 、 合 理 的 提示 信息 。 相 应 的 信息 是 否 合理 、 合 法 ; 插入 光盘 , 选 
择 、 更 改 目录 ,安装 的 进程 和 步骤 等 均 应 有 明显 的 、 合 理 的 指示 。 用 户 许可 协议 的 条 款 
要 保证 其 合理 、 合 法 。 
安装 过 程 中 是 否 会 出 现 不 可 预见 的 或 不 可 修复 的 错误 。 安 装 过 程 中 (特别 是 系统 软 


件 ) 对 硬件 的 识别 能 力 ; 检查 系统 安装 是 否 会 破坏 其 他 文件 或 配置 ; 检查 系统 安装 是 
否 可 以 中 止 并 恢复 原状 。 

软件 安装 的 完整 性 和 灵活 性 。 大 型 的 应 用 程序 会 提供 多 种 安装 模式 (最 大 、 最 小 、 自 定 
义 等 ) ,每 种 模式 是 否 能 够 正确 地 执行 ,安装 完毕 后 是 否 可 以 进行 合理 的 调整 。 

软件 使 用 的 许可 号 码 或 注册 号 码 的 验证 。 

升级 安装 后 原 有 应 用 程序 是 否 可 以 正常 运行 。 

外 载 测试 也 是 安装 测试 的 一 部 分 。 印 载 后 ,文件 目录、 快捷 方 式 等 是 否 清 除 ; 印 载 
后 ,占用 的 系统 资源 是 否 全 部 释放 ; 印 载 后 ,是 否 影 响 其 他 软件 的 使 用 。 

安装 测试 的 设计 可 参考 使 用 规约 导出 法 和 错误 猜测 法 。 

11. 用 户 文 档 测 试 

用 户 文档 一 般 包 括 用 户 操作 手册 维护 手册 和 在 线 帮助 。 

用 户 操作 手册 测试 主要 涉及 是 否 准确 地 按照 操作 手册 的 描述 使 用 系统 功能 ? 操作 手册 中 
的 每 条 必须 尝试 ; 检查 每 条 陈述 ; 查找 容易 误导 用 户 的 内 容 。 

维护 手册 是 软件 产品 投入 运行 以 后 ,发现 问 题 对 其 进行 修正 ,更改 等 的 建议 以 及 修改 可 能 
的 影响 所 作 的 详细 描述 。 维 护 手册 的 测试 可 以 通过 模拟 相关 问题 的 修正 和 更 改 来 进行 。 

在 线 帮助 是 给 用 户 提 供 一 种 实时 的 咨询 服务 。 一 个 完善 的 系统 应 该 具备 在 线 帮 助 的 功 
能 ,可 以 说 在 线 帮助 是 系统 中 不 可 或 缺 的 功能 。 因 而 在 线 帮助 测试 同样 显得 十 分 必要 。 在 线 
帮助 测试 主要 用 于 验证 系统 的 实时 在 线 帮助 的 可 操作 性 和 准确 性 。 在 线 帮助 测试 人 员 需 要 对 
下 列 问题 给 予 关注 : 

。 帮助 文档 的 索引 是 否 准确 无 误 ; 

。 帮助 文档 的 内 容 是 否 贴 切 ; 

。 系统 运行 过 程 中 帮助 文档 是 否 能 被 激活 ; 

。 所 激活 的 帮助 内 容 是 否 符合 当前 操作 内 容 ; 

。 帮助 中 的 超 链接 功能 是 否 可 用 、 可 靠 ; 

。 帮助 文档 是 否 书写 得 十 分 具体 ,可 以 满足 客户 的 需求 。 

在 线 帮 助 测试 设计 的 主要 方法 是 规约 导出 法 。 


6.4 系统 测试 的 分 析 和 用 例 设 计 


系统 测试 的 分 析 和 用 例 设 计 是 系统 测试 的 最 困难 阶段 ,在 进行 系统 测试 分 析 和 用 例 的 设 
计时 ,可 以 从 以 下 几 个 方面 来 考虑 ,这 里 结合 某 商业 银行 ATM 系统 为 例 来 阐述 。 
1. 系统 级 功能 
系统 级 功能 包括 正常 的 功能 和 非 正 常 的 功能 。 系 统 级 功能 是 指 要 在 系统 的 功能 层面 上 分 
析 并 依据 分 析 的 结果 设计 用 例 , 对 于 某 商 业 银行 ATM 系统 而 言 ,系统 级 的 正常 功能 有 : 
。 非 跨行 和 跨行 取款 。 检 查 该 功能 是 否 正常 实现 ,同时 可 能 涉及 检查 : 是 否 收取 手续 费 
及 是 否 合理 、 取 款额 是 否 超 限 、 当 天 存款 后 是 否 当 天 可 以 取 、 收 据 是 否 正 常 打印 等 。 
。 非 跨行 和 跨行 存款 。 检 查 该 功能 是 否 正常 实现 ,同时 可 能 涉及 检查 : 存款 是 否 有 限 
额 , 假 钞 是 否 能 识别 .是 否 收取 手续 费 及 是 否 合理 ,收据 是 否 正常 打印 等 。 
。 非 跨行 查询 和 跨行 。 检 查 该 功能 是 否 正常 。 


系统 级 非 正常 功能 有 : 
。 非 跨行 和 跨行 取款 。 包 括 钱 箱 钱 不 足 、 账 户 钱 不 足 .错误 输入 密码 次 数 超 限 、 取 款 金 额 
非 100 的 倍数 、 取 款 过 程 中 随时 中 断 (如 按 “ 取 消 ” 键 ) ,账户 挂失 或 冻结 能 否 取款 。 
。 非 跨行 和 跨行 存款 。 包 括 存 和信 非 100 元 钞 (如 50 元 )、 存 入 假 钞 、 错 误 输 入 密码 次 数 超 
限 、 存 款 过 程 中 随时 中 断 (如 按 * 取 消 ? 键 ) ,账户 挂失 或 冻结 能 否 存款 。 

。 非 跨行 查询 和 跨行 。 查 询 时 随时 中 断 查询 。 

系统 级 功能 分 析 之 后 ,就 可 以 设计 用 例 , 用 例 的 设计 要 保证 系统 功能 的 全 覆盖 。 所 使 用 的 
用 例 设计 方法 可 以 是 场景 法 ,规约 导出 法 ,边界 值 法 和 等 价 类 法 等 。 

2. 系统 的 业务 流 

系统 的 业务 流 和 系统 的 功能 在 一 定 程度 上 存在 交叉 ,但 是 它们 分 析 的 角度 有 所 不 同 ,系统 
的 业务 流 强 调 流 , 包 括 正常 业务 流 和 非 正常 业务 流 , 这 些 业 务 流 可 以 称 之 为 系统 线索 。 对 于 某 
商业 银行 ATM 系统 而 言 ,系统 的 正常 业务 流 可 能 有 : 

。 查询 账户 余额 一 取款 一 查询 账户 余额 一 取款 一 正常 退出 。 

。 查询 账户 余额 一 存款 一 查询 账户 余额 一 存款 一 正常 退出 。 

。 取款 一 查询 账户 余额 一 取款 一 查询 账户 余额 一 正常 退出 。 

。 存款 ~ 查询 账户 余额 ~ 取款 一 查询 账户 余额 一 正常 退出 。 

。 存款 一 存款 一 查询 账户 余额 一 退出 。 

系统 的 非 正 常 业务 流 可 能 有 : 

。 查询 账户 余额 取款 一 查询 账户 余额 一 取款 一 按 * 取 消 ” 键 退出 。 

。 查询 账户 余额 一 存款 一 取消 。 

。 取款 一 查询 账户 余额 一 取款 一 查询 账户 余额 一 按 * 取 消 ” 键 退出 。 

。 存款 一 查询 账户 余额 一 取款 一 按 * 取 消 ” 键 退出 。 

。 存款 一 存款 一 查询 账户 余额 一 按 * 取 消 ” 键 退出 。 

无 论 是 正常 的 业务 流 还 是 非 正常 的 业务 流 都 是 系统 功能 的 延伸 ,这 种 系统 的 业务 流 之 所 
以 被 称 之 为 线索 ,是 因为 这 种 系统 功能 的 延伸 可 以 很 长 很 长 。 对 于 商业 银行 ATM 系统 而 言 ， 
线索 很 长 就 是 指 这 些 业务 理论 上 可 以 无 穷尽 地 做 下 去 。 

系统 业务 流 分 析 之 后 ,就 可 以 设计 用 例 , 用 例 的 设计 尽量 覆盖 所 有 可 能 的 业务 流 , 也 就 是 
说 这 些 业 务 流 用 户 在 使 用 时 发 生 的 概率 比较 高 。 可 以 运用 80-20 理论 为 系统 的 业务 流 覆 盖 作 
分 析 。 如 业务 流 : 查询 账户 余额 ~ 取款 一 取款 一 取款 一 取款 一 取款 一 取款 一 查询 余额 一 正常 
退出 ,可 能 就 是 一 个 正常 的 业务 流 。 

用 例 的 设计 方法 一 般 采 用 场景 法 、 推 测 法 和 需求 规约 导出 法 。 

3. 系统 级 别 的 接口 

系统 级 别 的 接口 可 能 涉及 与 硬件 的 接口 与 其 他 软件 系统 的 接口 .与 人 的 接口 等 。 在 分 析 
时 不 仅 要 考虑 到 接口 正常 的 情况 ,也 要 考虑 到 接口 非 正常 的 情况 。 

对 于 某 商业 银行 ATM 系统 而 言 ,接口 有 用 户 和 触摸 屏 的 接口 用户 和 ATM 键 的 接口 、 
银行 卡 和 ATM 的 插 模 的 接口 .软件 系统 和 收据 打印 机 接口 、 存 款 口 .其 他 银行 的 接口 。 在 测 
试 分 析 时 需要 分 析 所 有 的 接口 ,同时 要 分 析 这 些 接口 正常 的 情况 和 非 正常 的 情况 ,用例 设 计时 


要 保证 用 例 至 少 覆 盖 这 些 接口 一 次 ,包括 接口 正常 和 非 正 常 。 如 需要 设计 用 例 覆 盖 下 面 的 接 
口 , 有 时 一 些 测 试用 例 的 执行 需要 对 一 些 接口 作 模拟 。 

。 覆盖 所 有 触摸 屏 的 功能 (包括 取款 、 存 款 和 查询 )。 

。 覆盖 所 有 触摸 屏 不 正常 的 操作 情况 。 

。 覆盖 所 有 ATM 功能 键 。 

。 ATM 插 槽 正常 的 情况 。 

。 存款 口 正常 的 情况 。 

。 存款 口 打 不 开 或 不 能 正常 关闭 情况 。 

。 ATM 插 槽 损坏 情况 。 

。 跨行 正常 取款 情况 。 

。 跨行 取款 接口 包 异 常情 况 。 

用 例 的 设计 方法 以 需求 规约 导出 法 为 主 。 

4. 系统 级 别 的 输入 和 输出 

系统 级 别 的 输入 和 输出 涉及 系统 运行 的 所 有 外 部 输入 和 外 部 输出 ,一 般 不 包括 中 间 的 交 
互 输入 和 输出 ,同时 应 该 考虑 输入 和 输出 的 不 正常 情况 。 如 网 上 订 票 需要 输入 日 期 .航班 号 、 
身份 证 号 .银行 卡号 等 ,输出 的 是 机 票 、 保 险 单 。 还 应 该 考虑 诸如 航班 号 非 正 常 、 身 份 证 不 合 
法 、 机 票 打 偏 或 模糊 等 输入 和 输出 情况 。 又 如 ,GIS 系统 在 运行 时 读 入 外 部 图 形 文件 ,输出 是 
需要 的 地 形 图 。 对 于 某 商业 银行 ATM 系统 而 言 , 系统 级 别 输入 包括 卡 输入 、 存 款 放 钞 等 , 卡 
输入 要 考虑 卡 过 期 无 效 的 情况 ,存款 放 钞 要 考虑 钞 被 污染 或 钞 有 皱 初等 情况 ; 输出 包括 吐 钞 、 
收据 输出 、 各 种 不 同 的 屏幕 显示 等 。 

在 测试 分 析 之 后 ,就 可 以 进行 用 例 的 设计 ,用 例 应 该 覆盖 所 有 系统 级 别 的 输入 和 输出 至 少 
一 次 。 

用 例 的 设计 方法 以 需求 规约 导出 法 为 主 。 

5. 系统 级 别 的 状态 转换 

基于 系统 的 状态 转换 的 测试 分 析 是 一 种 很 好 的 途径 ,对 于 一 般 的 系统 均 能 分 析 其 系统 状 
态 转换 。 如 在 汽车 零 部 件 在 线 采购 和 销售 的 系统 中 存在 如 下 的 系统 状态 转换 : 

启动 系统 状态 一 销售 缺 货 状态 一 在 线 订购 状态 一 订购 完成 状态 一 销售 状态 一 当天 结账 状 
态 一 打印 报表 状态 一 关闭 系统 状态 。 

再 如 我 们 熟悉 的 复印 机 系统 也 存在 如 下 的 系统 状态 转换 : 

启动 状态 一 等 待 复印 状态 一 正在 复印 状态 一 缺 墨 状态 一 正在 复印 状态 一 卡 纸 状态 一 退出 


状态 。 
下 面 以 某 商 业 银行 ATM 系统 为 例 加 以 分 析 。 图 6-1 所 示 是 ATM 系统 状态 图 。 图 中 的 
方 框 表示 状态 ,箭头 表示 状态 的 变迁 。 状 态 图 描述 系统 基于 事件 反应 的 动态 行为 ,显示 了 该 系 
统 如 何 根据 当前 所 处 的 状态 对 不 同 的 事件 所 做 出 的 反应 。 状 态 图 有 三 个 关键 要 素 : 事件 、 状 
态 变迁 , 即 在 事件 的 触发 下 系统 从 一 种 状态 变迁 到 另 一 种 状态 。 

系统 级 别 的 状态 转换 图 (状态 图 ) 是 测试 分 析 的 依据 之 一 ,由 于 状态 图 是 系统 设计 规约 的 
重要 组 成 部 分 ,在 测试 分 析 时 要 验证 状态 图 和 系统 实现 的 一 致 性 ,在 验证 的 基础 上 再 进行 用 例 
的 设计 ,用 例 设 计 要 求 达到 状态 图 的 状态 覆盖 或 边 覆 盖 ( 变 迁 覆 盖 ) 。 

测试 用 例 的 设计 方法 一 般 以 规约 导出 法 ,场景 法 等 为 主 。 


插入 银行 卡 
检查 卡 失败 检查 卡 


卡 检查 正确 


错误 
输入 密码 1 上 一 | 输入 密码 2 


选择 交易 


交易 交易 


错误 


密码 正确 1 密码 正确 


密码 正确 


| sr | 


输入 密码 3 


重新 选择 交易 


查询 交易 取款 交易 


存款 交易 


图 6-1 ATM 系统 状态 图 


6. 系统 级 别 的 数据 


由 于 ERD(Entity Relationship Diagram) 的 实体 属性 是 数据 字典 和 数据 库 设 计 的 基础 ,也 
和 数据 库 表 的 字段 具有 对 应 关系 ,因此 系统 级 别 的 数据 分 析 一 般 以 ERD 为 依据 。 下 面 以 某 商 
业 银 行 ATM 系统 的 简化 ERD 来 加 以 分 析 。 图 6-2 所 示 是 ATM 系统 的 简化 ERD。 由 于 
ERD 是 系统 需求 分 析 规 约 的 重要 组 成 部 分 ,在 进行 测试 分 析 时 ,首先 要 验证 ERD 和 系统 设计 


中 的 数据 字典 和 数据 库 的 一 致 性 ,在 此 基础 上 再 
对 ERD 本 身 从 测试 角度 进行 分 析 。 在 图 6-2 
中 ,客户 和 账户 之 间 、 客 户 和 交易 之 间 、 终 端 和 交 
易 之 间 是 一 对 多 的 关系 ,客户 和 终端 之 间 是 多 对 
多 的 关系 ,根据 这 些 关系 可 以 设计 测试 用 例 , 如 
可 以 设计 满足 以 下 情况 的 用 例 : 

。 在 ATM 系统 中 是 否 允许 一 个 客户 有 多 
个 账户 。 
一 个 客户 是 否 能 做 多 个 交易 ,是 否 有 交 
易 次 数 的 限制 。 
一 个 终端 是 否 允 许 用 不 同 的 银行 卡 做 
交易 。 


一 张 主 卡 是 否 可 以 持 有 多 张 副 卡 。 
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图 6-2 ATM 系统 的 简化 ERD 


不 同 的 客户 在 跨行 的 不 同 ATM 机 上 是 否 可 以 随意 做 交易 。 


该 方法 设计 测试 用 例 一 般 采用 规约 导出 法 。 设 计 出 的 用 例 一 般 作为 系统 测试 用 例 的 补充 。 


7. 系统 非 功能 特性 


系统 非 功 能 性 的 测试 分 析 和 用 例 设计 在 “系统 测试 类 型 "中 作 了 详细 分 析 。 系 统 非 功 能 特 
性 的 测试 一 般 是 通过 实现 功能 来 实现 的 ,但 不 以 测试 功能 为 目的 。 系 统 非 功能 特性 根据 系统 
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需求 来 确定 需要 测试 哪些 方面 ,如 系统 需求 中 对 系统 的 性 能 、 安 全 人 性、 兼容 性 方面 有 明确 要 求 ， 
那么 必须 对 这 些 要 求 作 分 析 并 设计 测试 用 例 。 对 于 ATM 系统 ,假如 系统 有 非 功能 性 需求 : 
系统 应 该 满足 同时 支持 1000 人 在 线 交易 ,系统 必须 对 所 有 的 交易 数据 和 密码 动态 加 密 , 当 网 
络 中 断 时 ,系统 能 自动 恢复 等 。 针 对 这 些 需 求 ,测试 人 员 应 该 根据 具体 情况 进行 详细 分 析 并 设 
计 出 合理 的 测试 用 例 。 比 如 ,可 以 设计 满足 如 下 情况 的 测试 用 例 : 

。 在 真实 环境 或 接近 真实 环境 下 ,借助 于 工具 同时 模拟 1000 人 以 上 在 线 用 户 做 不 同 的 

交易 。 

。 借助 于 工具 实现 系统 自动 产生 动态 密 钥 ,并 能 实现 对 交易 数据 和 密码 动态 加 密 。 

。 系统 运行 时 人 为 中 断 网 络 ,检查 交易 是 否 自动 恢复 。 

该 方法 设计 测试 用 例 一 般 采用 规约 导出 法 并 结合 系统 功能 性 测试 法 。 设 计 出 的 测试 用 例 
具有 专门 的 针对 人 性。 

以 上 从 不 同 的 角度 来 阐述 如 何 分 析 和 设计 系统 测试 用 例 , 从 不 同 的 角度 分 析 并 设计 的 测 
试用 例 其 目的 是 不 一 样 的 。 作 为 用 例 的 分 析 和 设计 人 员 很 难 做 到 从 不 同 角度 设计 出 的 测试 用 
例 之 间 没 有 交叉 和 重复 ,所 以 ,对 设计 的 系统 测试 用 例 集 的 评审 是 解决 用 例 之 间 交叉 和 重复 的 
有 效 方法 。 通 过 评审 可 以 得 到 一 个 设计 合理 的 测试 用 例 集 ,测试 用 例 集 中 的 用 例 执 行 后 就 可 
以 同时 满足 上 面 提 及 的 不 同 覆 盖 指 标 , 达 到 系统 测试 的 目的 。 


6.5 系统 测试 实例 


这 里 以 “ATM 系统 ”为 例 来 分 析 系 统 测试 。 
1. 系统 需求 


1 引言 
1.1 目的 
为 了 明确 用 户 的 需求 并 较 好 地 与 开发 人 员 进 行 沟 通 , 使 用 户 与 开发 人 员 双 方 对 软件 需求 取得 共同 理 
解 的 基础 上 达成 协议 , 特 编写 此 文档 ,并 作为 整个 软件 开发 的 基础 。 
1.2 背景 
本 项 目的 开发 是 应 ** 银行 要 求 ,为 其 开发 的 一 套 ATM 系统 ,用 以 代替 原来 的 ATM 系统 ,以 显著 提 
高 现 有 系统 运行 效率 ,加 快 银行 的 竞争 ,提高 储户 满意 度 。 
1.3 参考 资料 
文档 编写 标准 : GB 99999 一 99 
《计算 机 软件 需求 说 明 编制 指南 ) 一 一 GB 一 9385 一 88。 
《计算 机 软件 产品 开发 文件 指南 ) 一 一 GB 一 8567 一 88。 
《ATM 系统 可 行 性 分 析 报 告 》。 
1.4 术语 
银行 : 一 个 金融 机 构 , 负 责 保存 顾客 的 账号 信息 。 可 以 经 授权 访问 账号 。 
客户 : 本 软件 系统 的 开发 提出 方 , 即 ** 银行 。 
卡 : 储蓄 卡 。 银 行 发 行 的 可 以 在 ATM 终端 交易 的 一 种 储蓄 凭证 介质 。 
储户 : 在 ATM 系统 上 交易 的 银行 账户 拥有 者 。 一 个 持 卡 人 就 是 一 个 储户 。 
ATM : Auto Teller Machine, 由 两 部 分 组 成 : 一 部 分 是 ATM 服务 器 , 另 一 部 分 是 ATM 终端 。 终端 负责 
和 银行 卡 持 有 者 进行 交互 ,ATM 服务 器 负责 处 理 交易 。 一 个 ATM 服务 器 可 以 同时 连接 多 个 ATM 终端 。 
账号 : 一 张 银行 卡 对 应 一 个 账户 ,卡号 与 账号 之 间 是 一 对 一 关系 。 


2 项 目 概述 
2.1 开发 软件 的 一 般 描述 

这 个 项 目的 开发 是 为 银行 提供 一 套 高 效 稳定 的 终端 服务 平台 ,为 储户 存款 ,取款 ,查询 等 提供 便利 。 
2.2 开发 软件 的 功能 描述 


该 软件 是 一 个 24 小 时 实时 服务 系统 ,可 以 划分 为 两 个 子 系统 : 一 个 是 服务 银行 储户 的 , 即 是 持 卡 人 的 
交易 系统 ; 另 一 个 是 服务 银行 工作 人 员 的 。 银 行 工作 人 员 分 为 两 类 : 一 类 是 业务 人 员 ,可 以 使 用 本 系统 进 
行 配 款 , 统 计 ,打印 报表 ; 一 类 是 技术 人 员 ,对 本 系统 进行 管理 维护 。 

本 系统 的 基本 框架 见 图 1。 

| ATM 系 统 
数据 库 ”FF 一 | Et 软件 =| 中 间 件 
| Os 
图 1 ATM 系统 框架 图 
2.3 实现 语言 
主要 使 用 Java 与 C,shell 语言 。 
2.4 用 户 特点 


本 软件 的 用 户主 要 是 银行 的 广大 持 卡 人 ,大 多 都 具有 使 用 ATM 的 经 验 。 另 外 ,系统 要 实现 的 一 个 重 
要 目标 就 是 界面 友好 性 和 易 操 作 性 。 即 使 是 一 个 对 ATM 系统 完全 陌生 的 客户 ,也 可 以 在 交易 界面 的 提示 
下 顺利 完成 交易 。 

另 一 部 分 的 用 户 是 银行 工作 人 员 ,大 致 分 为 两 类 : 一 类 是 业务 人 员 ,其 依赖 本 系统 管理 ATM 交易 参 
数 ,统计 交易 信息 ,打印 各 类 汇总 报表 ,根据 ATM 提示 及 时 配 款 ; 另 一 类 是 银行 技术 人 员 , 其 对 本 系统 进 
行 升级 ,维护 工作 。 
2.5 一 般 约束 

本 软件 的 主要 约束 是 时 间 期 限 。 
3 ”需求 说 明 
3.1 基本 描述 

ATM 终端 可 以 接受 一 张 可 识别 的 银行 储蓄 卡 ,通过 储户 身份 验证 后 , 同 储户 进行 各 种 交互 ,处 理 储户 
要 求 ,执行 各 类 操作 ,为 储户 服务 。 系 统 要 求 保 持 一 定时 间 内 的 交易 记录 ,可 以 处 理 多 个 ATM 终端 并 发 访 
问 。 同 时 ,系统 应 每 天 自动 汇总 各 种 交易 数据 ,生成 报表 。 系 统 24 小 时 工作 ,无 操作 时 播放 待机 动画 广 
告 。 系 统 具 有 设备 自 检 提示 报错 功能 ,可 以 提示 赁 条 打印 机 已 坏 ,ATM 终端 钱柜 缺 钱 。ATM 系统 工作 示 
意图 如 图 2 所 示 。 


客户 < 大 型 机 配置 ATM 操 作 员 


2 ATM 系统 工作 示意 图 


3.1.1 用 户 信息 
用 户 信息 分 为 2 部 分 : 储户 信息 和 管理 员 信息 。 
储户 信息 : 储户 姓名 ,储户 账户 (可 以 多 个 ) ,储户 电话 ,证 件 类 型 ,证件 号 码 。 
管理 员 信息 : 登录 名 ,密码 ,权限 。 
3.1.2 交易 信息 
卡 信息 : 卡号 ,账号 ,密码 , 卡 类 型 , 卡 金额 。 
ATM 信息 : ATM 编号 ,ATM 余额 。 
交易 流水 信息 : 交易 类 型 ,交易 代码 ,账号 ,交易 时 间 。 
3.2 功能 需求 
针对 ** 银行 对 该 软件 的 需求 ,做 如 下 功能 设计 ,在 给 出 基本 框架 之 后 ,将 逐一 介绍 各 部 分 
的 不 同 身份 分 为 两 个 子 系统 ,每 个 子 系统 包含 了 不 同 的 功能 : 
管理 子 系统 : 管理 维护 功能 , 配 款 功 能 ,统计 和 打印 报表 功能 。 
储户 子 系统 : 存款 功能 ,取款 功能 ,修改 密码 功能 ,转账 功能 ,查询 余额 等 功能 。 


ATM 系统 功能 模块 图 如 图 3 所 示 。 
区 到 


储户 子 系统 管理 子 系统 
身份 验证 身份 验证 

| 1 | 1 1 1 | 1 

存 | | 取 | | 转 | | 化 | | 豆 错 | | 复 | | 配 

球 | | 款 | | 账 | | 入 | | 秘 | | 集 | | 


图 3 ATM 系统 功能 模块 图 


3.2.1 储户 子 系统 
功能 需求 简介 
功能 需求 1: 
描述 : ATM 终端 无 人 操作 时 ,显示 待机 动画 。 
输入 : 无 。 
处 理 : ATM 显示 待机 界面 。 
输出 : 显示 待机 界面 。 


功能 需求 2: 

描述 : ATM 接受 卡 , 检 验 卡 是 否 可 进行 交易 。 
输入 : ATM 接收 用 户 插 卡 。 

处 理 : 检验 卡 是 否 可 识别 处 理 。 

输出 : 不 可 识别 退 卡 ; 否则 继续 。 

功能 需求 3: 

描述 : 校 验 密码 是 否 格 式 正确 。 

输入 : 储户 输入 密码 。 

处 理 : 校 验 密码 是 否 符合 格式 。 

输出 : 不 正确 则 提示 储户 重新 输入 。 


。 根 据 用 户 


功能 需求 4: 

描述 : 校 验 密码 是 否 正确 。 

输入 : 储户 输入 正确 格式 密码 。 

处 理 : 校 验 当前 密码 与 存储 的 账户 密码 是 否 一 致 
输出 : 不 一 致 则 提示 密码 错误 ,请 重新 输入 或 者 退 卡 。 


功能 需求 5: 

描述 : 卡 密码 连续 三 次 输入 错误 ,没收 磁卡 。 

输入 : 用 户 连续 第 三 次 输入 密码 。 

处 理 : 校 验 密码 。 

输出 : 错误 则 吞食 磁卡 ,提示 “您 的 卡 连续 三 次 密码 错误 ,已 被 吞没 。 请 联系 客服 955 *# ”。 


功能 需求 6: 

描述 : 磁卡 认证 完成 ,进入 主 交易 界面 。 
输入 : 储户 输入 正确 密码 。 

处 理 : 校 验 密码 。 

输出 : 显示 主 交 易 界面 。 


功能 需求 7: 

描述 : ATM 现金 不 足 , 系 统 应 对 取款 储户 进行 提示 ,可 退出 交易 。 
输入 : 无 。 

处 理 : 检查 ATM 现金 数 。 

输出 : 返回 至 ATM 主 交易 界面 。 


功能 需求 8: 

描述 : ATM 凭 条 打印 机 故障 ,系统 应 对 存款 和 转账 储户 进行 提示 ,可 退出 交易 。 
输入 : 无 。 

处 理 : 检查 ATM 凭 条 打印 机 。 

输出 : 故障 则 提示 客户 是 否 继续 ,可 返回 至 主 交易 界面 。 


功能 需求 9: 

描述 : ATM 认定 的 存款 金额 客户 不 认可 。 

输入 : 认证 成 功 完成 ,输入 需要 存储 的 金额 ,将 钞 币 放 和 人 ATM 机 。 
处 理 : 硬件 检验 钞 币 数量 ,提示 用 户 确 认 , 储 户 输入 “ 否 ”。 

输出 : 退出 钞 币 ,返回 主 界面 。 


功能 需求 10: 

描述 : ATM 存款 。 

输入 : ATM 认定 存款 金额 ,储户 “确认 ”。 

处 理 : 在 账号 上 记录 存 人 金额 。 

输出 : 打印 存款 凭 条 ,显示 “交易 成 功 ”, 返 回 主 交易 界面 。 


功能 需求 11: 

描述 : 取款 金额 大 于 账户 余额 。 

输入 : 输入 取款 金额 。 

处 理 : 判断 输入 金额 和 账户 余额 。 

输出 : 取款 余额 大 , 则 提示 储户 “余额 不 足 ”, 返 回 主 界面 。 


3. 


人 


功能 需求 12: 

描述 : 取款 数额 超过 当日 取款 最 大 额度 。 

输入 : 储户 输入 取款 金额 。 

处 理 : 判断 输入 金额 和 当日 该 账户 ATM 取款 额 之 和 是 否 大 于 当日 取款 最 大 额度 。 
输出 : 如 超出 则 提示 储户 “超过 当日 取款 最 大 额度 ”, 重 新 输入 或 返回 。 


功能 需求 13: 

描述 : 取款 。 

输入 : 取款 合法 金额 。 

处 理 : 从 账户 减 去 取 走 的 金额 。 
输出 : 吐 钱 。 


功能 需求 14: 

描述 : 取款 交易 成 功 ,打印 取款 凭 条 。 

输入 : 储户 输入 “打印 ”或 者 “不 打印 ”。 

处 理 : 若是 “打印 ”, 则 打印 机 打印 赁 条 ; 否则 什么 也 不 做 。 
输出 : 无 。 


功能 需求 15: 

描述 : 修改 密码 。 

输入 : 储户 输入 新 密码 。 

处 理 : 两 次 新 密码 判断 是 否 一 致 

输出 : 一 致 则 重 置 密码 ,显示 “修改 成 功 ”; 否则 退出 修改 密码 。 


功能 需求 16: 

描述 : 转账 。 

输入 : 转账 账号 ,转账 金额 。 

处 理 : 判断 金额 是 否 超过 本 账户 现 有 金额 ,是 则 本 账号 下 账 , 它 账 号 上 账 。 
输出 : 显示 “转账 成 功 ”, 或 者 退出 转账 。 


.2 管理 子 系统 


功能 需求 1: 

描述 : 打印 报表 。 

输入 : 业务 人 员 启 动 打印 程序 。 

处 理 : 系统 自动 生成 日 、 月 ,年 各 种 报表 。 

输出 : 无 。 

功能 需求 2: 

描述 : 自动 升级 或 维护 。 

输入 : 工作 人 员 启 动 升 级 程序 。 

处 理 : 自动 获取 升级 文件 ,终止 系统 ,升级 ,重启 ATM 系统 。 

输出 : 显示 “升级 成 功 ,版 本 号 V *. *”。 

性 能 及 其 他 需求 

。 在 查询 过 程 中 ,要 求 系统 显示 该 账户 卡 上 所 有 的 余额 。 

。 在 取款 过 程 中 ,该 系统 只 支持 交易 金额 为 100 的 倍数 。 

。 在 存款 过 程 中 ,该 系统 只 支持 交易 金额 为 50 的 倍数 。 

。 在 转账 过 程 中 ,该 系统 支持 任何 用 户 输入 的 数据 ,但 是 仅仅 限于 本 行 之 间 的 账户 转账 。 
。 如 果 交 易 中 响 应 时 间 超 过 30s, 系 统 提示 “操作 已 过 时 ”, 自 动 退 出 本 系统 。 


。 交易 结束 时 ,系统 更 新 账户 上 的 数据 ,保持 账户 余额 的 一 致 性 。 

。 交易 完成 后 ,用 户 可 以 单 击 “ 取 卡 ” 按 钮 退出 本 系统 。 

。 本 系统 可 以 进行 跨 银 行 的 现金 交易 。 

。 系统 可 以 并 行使 用 的 用 户 在 100 个 以 上 。 

注意 : 当 交 易 金 额 超 过 当前 账户 余额 时 ,系统 自己 提示 “余额 不 足 ”, 自 动 退出 本 系统 。 当 系统 遇 到 任 
何不 正确 的 输入 时 系统 自动 退出 。 
3.4 对 输入 输出 的 规定 

密码 : 由 用 户 设置 的 一 个 6 位 整数 。 

取款 数目 : 只 支持 交易 金额 为 100 的 倍数 。 

取款 金额 : 不 能 输入 5000 以 上 的 数字 

存款 数目 : 只 支持 交易 金额 为 50 的 倍数 。 

转账 数目 : 支持 用 户 输入 的 任何 数据 ,但 是 仅 限 于 行内 间 账 户 转账 。 

响应 时 间 : 30s 以 内 。 

注意 : 如 果 输 入 、 给 出 违反 以 上 规定 , 则 系统 退出 ,返回 到 登录 页 面 。 
3.5 特殊 需求 

易 用 性 : 系统 设计 应 具有 良好 的 易 用 性 、 操 作 简 便 ,符合 常规 Windows 操作 环境 下 的 用 户 使 用 习惯 。 
同时 ,尽量 减少 用 户 的 记忆 工作 量 , 如 在 信息 录入 时 尽 可 能 充分 利用 数据 字典 进行 选择 录入 ,以 提高 用 户 
工作 效率 。 在 系统 查询 功能 设计 时 ,应 提供 多 种 查询 条 件 的 复合 查询 ,让 用 户 可 以 快速 、 精 确 地 得 到 相 
关 信 息 。 同 时 ,系统 设计 应 具有 良好 的 健壮 性 ,如 对 各 种 用 户 各 种 错误 输入 应 能 及 时 识别 并 给 出 相应 
提示 。 

安全 性 : 系统 中 所 有 涉及 的 敏感 信息 如 登录 口令 等 ,服务 器 端 应 设置 严格 安全 访问 控制 策略 ,从 而 保 
证 系统 安全 性 和 操作 责任 的 可 追溯 性 。 


2. 采用 的 测试 方法 
系统 从 如 下 方面 进行 测试 分 析 并 结合 具体 的 用 例 设计 技术 (主要 是 黑 盒 测试 技术 ) 来 设计 
测试 用 例 : 
。 系统 级 功能 ; 
。 系统 业务 流 ; 
系统 级 别 的 接口 ; 
。 系统 级 别 的 输入 和 输出 ; 
系统 级 别 的 状态 转换 ; 
系统 级 别 数据 ; 
。 系统 非 功 能 。 
由 于 运用 这 些 方法 分 析 并 设计 的 测试 用 例 具有 交叉 重复 的 可 能 ,因此 测试 用 例 集 需 要 经 
过 严格 的 评审 ,除去 不 合理 的 和 重复 的 测试 用 例 。 另 外 ,可 能 由 于 没有 达到 某 种 覆盖 要 求 或 覆 
盖 不 足 还 需要 补充 一 些 测 试用 例 。 
3. 测试 环境 
(1) 硬件 需求 : 
。 后 台 测 试 主机 一 台 
。 跨行 测试 主机 一 台 ; 
。 ATM 测试 机 具 两 台 ; 
。 网 点 服务 器 一 台 ; 


; 


高 级 软件 测试 技术 


。 打印 机 一 台 。 
(2) 软件 需求 : 

。 应 用 软件 测试 版 ; 
。 中 间 件 tuxedo; 


Windows XP 操作 系统 ; 


。 HP UNIX 操作 系统 ; 


Oracle 数据 库 。 


(3) 网 络 需求 : 

8MB 以 上 的 带宽 。 

4. 测试 对 象 

ATM 系统 。 应 用 软件 版 本 : sys_test_tag( 系 统 测试 版 本 标签 ) 。 
5. 测试 分 析 与 用 例 设计 

(1) 测试 数据 准备 。 如 表 6-1 所 示 。 


表 6-1 基本 测试 数据 


卡 号 预期 密码 账户 余额 (元 ) 
201288345608( 本 系统 的 A 银行 账号 ) 123456 8000 
201288345618( 本 系统 的 A 银行 账号 ) 654321 4000 
101288345609( 跨 行 B 银 行 账号 ) 321456 2000 


(2) 基于 系统 级 功能 的 测试 分 析 与 用 例 设计 。 

基于 系统 级 功能 的 测试 分 析 需 要 在 系统 层面 上 考虑 正常 功能 和 非 正常 功能 。 莉 盖 指 标 要 
求 是 达到 正常 功能 和 非 正 常 功 能 全 覆盖 ,正常 的 功能 和 非 正常 功能 主要 是 根据 需求 导出 的 , 包 
括 显示 的 和 隐 含 的 需求 。 表 6-2 和 表 6-3 是 两 个 测试 用 例 的 例子 。 


表 6-2 测试 用 例 列举 


用 例 编号 ATM_Sys_Test_case_fun_001 
测试 覆盖 的 
系统 功能 正常 取款 (覆盖 正常 功能 ) 
用 例 设计 方法 | 场景 法 
前 置 条 件 “| 测试 卡 正常 账户 余额 足 、 密 码 无 误 
输入 
初始 输入 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 
人 和、 输出 1 人 、 输 出 2 人 入、 输出 3 人 和 人、 输出 4 和信、 输出 5 和、 输出 6 
输入 : 选择 
输入 : 密码 | “取款 ”, 再 | 输入 : 无 ; 
插 卡 : 为 123456; | 输入 : 200; | 输出 :“ 请 在 


201288345608 


输出 : 选择 | 输出 :“ 交 易 | 30 秒 内 取 走 
交易 类 型 正在 处 理 中 | 现金 
等 待 ” 


最 后 预期 输出 


取出 200RMB .提供 收据 、 退 卡 


表 6-3 测试 用 例 列举 
用 例 编号 ATM™M Sys_Test_case fun 002 
测试 覆盖 的 
系统 功能 
用 例 设计 方法 | 场景 法 、 错 误 推测 法 ,需求 规约 导出 法 的 综合 


前 置 条 件 “| 测试 卡 正常 ,账户 正常 


取款 未 成 功 并 吞 卡 (密码 错误 超过 3 次 )( 覆 盖 一 个 非 正常 功能 ) 


输入 
初始 输入 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 
入 ,输出 1 和 人、 输出 2 和信、 输出 3 人 和 人、 输出 4 和、 输出 5 和、 输出 6 
输入 : 密码 | 输入 : 密码 
插 卡 ， 为 123457; | 为 123458; | 输入 : 密码 


输出 :“ 密 码 | 输出 :“ 密 码 | 为 123459; | 无 无 无 
不 正确 请 重 | 不 正确 请 重 | 输出 : 
新 输入 ” 新 输入 ” 


201288345608 


最 后 预期 输出 
“密码 不 正确 已 经 三 次 , 吞 卡 。 请 电话 和 95 **x 联系 ” 


(3) 基于 系统 业务 流 测试 分 析 与 用 例 设计 。 
系统 的 业务 流 在 某 种 程度 上 和 系统 功能 有 交叉 ,系统 业务 流 是 系统 功能 的 延伸 ,其 延伸 的 
系统 线索 在 理论 上 可 以 是 无 限 长 ,用 例 设 计时 一 般 要 达到 系统 主要 的 业务 流 全 覆盖 ,系统 主要 
业务 流 的 分 析 以 需求 规约 为 依据 。 同 时 ,和 客户 交流 也 是 一 个 重要 的 途径 ,以 确定 哪些 是 系统 
的 主要 业务 流 。 表 6-4 和 表 6-5 是 两 个 测试 用 例 的 例子 。 
表 6-4 测试 用 例 列举 
用 例 编号 ATM_Sys_Test_case_business_001 
测试 覆盖 的 | 异地 跨行 取款 3 次 成 功 正常 取款 (覆盖 正常 连续 异地 取款 业务 ), 即 取款 一 取款 一 取款 一 
系统 业务 “| 查询 账户 余额 一 正常 退出 (未 打 交 易 赁 条 ) 
用 例 设计 方法 | 场景 法 ,需求 规约 导出 法 综合 
前 置 条 件 “| 测试 卡 正常 .账户 正常 .密码 正常 


输入 
预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预 期 交互 输 | 预期 交互 输 | 预期 交互 输 
入 ,输出 1 和 人 ,输出 2 和、 输出 3 人 和 人、 输出 4 入 ,输出 5 入 .输出 6 


初始 输入 


输入 : 密码 为 | 款 ”, 再 输入 : | 款 ”, 再 输入 : | 款 ”, 再 输入 : | 输 入: 选择“ 查 
插 卡 : 321456; ” 输 |300; 输 出 ;| 500; 输 出 :| 500; 输 出 ;| 询 ”; 


101288345609 | 出 : 选择 交易 “交易 正在 处 “交易 正 在 处 “交易 正在 处 | 输出 : 账户 余 
类 型 理 中 等 待 ”, 输 | 理 中 等 待 ”, 输 | 理 中 等 待 ”, 输 | 额 为 700RMB 
出 : 300RMB | 出 : 500RMB | 出: 500RMB 
最 后 预期 输出 


取出 700RMB 以 上 退 卡 


表 6-5 测试 用 例 列 举 


用 例 编号 | ATML_Sys_Test_case_business_ 002 
测试 覆盖 的 | 本 地 取款 (取消 并 退出 ,本 用 例 执行 后 需要 检查 最 后 一 次 取款 交易 取消 后 ,账户 是 否 扣 
系统 业务 款 ) : 查询 账户 余额 一 取款 一 查询 账户 余额 一 取款 一 按 * 取 消 ” 键 退出 
用 例 设 计 方 法 | 场景 法 ,需求 规约 导出 法 综合 
前 置 条 件 测试 卡 正常 .账户 正常 .密码 正常 
输入 
初始 输入 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 
入 .输出 1 入. 输出 2 人 和、 输出 3 入 ,输出 4 入 .输出 5 入 .输出 6 
输入 : 选择 “ 取 输入 ,选择 
和 人: 密码 ”, 再 输入 ， 
插 卡 ， we ee se We 人 交 ee pe 
的 全 和 ne 4000RMB 人 3500RMB “ 取 
500RMB 
最 后 预期 输出 
退 卡 


(4) 系统 级 别 的 接口 的 测试 分 析 与 用 例 设计 。 

在 ATM 系统 中 有 人 机 接口 软件 和 硬件 接口 .ATM 系统 和 其 他 银行 的 接口 ,在 对 接口 
进行 测试 用 例 分 析 时 ,要 分 析 接 口 的 特点 并 根据 特点 设计 测试 用 例 , 一 般 的 覆盖 要 求 是 达到 所 
有 接口 覆盖 (包括 正常 和 非 正 常 的 情况 ), 即 测试 用 例 需 覆盖 所 有 接口 至 少 一 次 。 表 6-6 和 
表 6-7 是 两 个 测试 用 例 的 例子 。 


表 6-6 测试 用 例 列举 


用 例 编号 ATM_Sys_Test_case_interface_001 
测试 覆盖 的 
系统 接口 饭 卡 插入 ATM 机 (覆盖 插 卡 口 对 异常 卡 的 识别 和 处 理 ) 
用 例 设计 方法 错误 推测 法 
前 置 条 件 测试 卡 不 正常 
输入 
初始 输入 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预期 交互 输 
入 .输出 1 入 .输出 2 入 .输出 3 入 .输出 4 入 输出 5 人 和 人、 输出 6 
插 卡 : 饭 卡 | 无 无 无 无 无 无 
最 后 预期 输出 
“非法 卡 " 和 退 卡 
表 6-7 测试 用 例 列举 
用 例 编号 ATM_Sys_Test_case_interface_002 
先 存款 发 现 有 不 能 存 的 非法 钞 , 取 出 非法 钞 继续 存款 ,存款 成 功 后 继续 存款 , 存 钞 口 故障 ， 
测试 覆盖 的 接口 | 退出 存款 并 打印 收据 退出 系统 。 覆 盖 存 款 口 (正常 和 故障 情况 ) 及 打印 口 ,该 用 例 的 执行 
需要 人 工 模拟 干预 
用 例 设计 方法 | 场景 法 、 错 误 推测 法 综合 


前 置 条 件 


测试 卡 正常 .账户 正常 .密码 正常 


输入 
预期 交互 输 | 预期 交互 输 | 预期 交互 输 | 预 期 交互 输 | 预期 交互 输 | 预 期 交互 输 


初始 输入 输出 1 | 入 ,输出 2 ”| 人 入 ,输出 3 | 入 ,输出 4 | 入 .输出 5 。 | 入, 输出 6 
| 输 入 “ 确 
ay 定 ", 存 款 口 打 
显示 :请 认 | 开 ,到 出 存款 | 给 和 “ 存 
输入 密码 为 | 人 100 售 数 的 | 里 的 假 钞 ,| 款 ”, 存 就 口 故 
揪 卡 011 输 册 | 台 ” 下 答 人 | 再。 输入 | 障 不 能 打开 ,| 输入 “打印 | 元 
201288345618 ES 1000RMB; 输 | 再 输入 :“ 取 | 收据 ” 


选择 交易 类 型 |( 即 放 和 ):| ,交易 正 | 消 "( 即 下 消 弘 


在 处 理 中 等 | 续 存 款 ) 
待 ”, 输 出 : 存 
入 500RMB 

最 后 预期 输出 
输出 收据 和 退 卡 


(5) 系统 级 别 的 输入 和 输出 的 测试 分 析 与 用 例 设计 。 

由 于 在 ATM 系统 中 系统 级 别 的 输入 和 输出 和 其 他 的 方法 存在 很 多 重复 ,这 里 不 再 详细 
举例 ,可 以 参阅 6.4 节 中 的 “系统 级 别 的 输入 和 输出 ”内 容 。 

(6) 系统 级 别 的 状态 转换 的 测试 分 析 与 用 例 设计 。 

由 于 在 ATM 系统 中 系统 级 别 的 状态 转换 和 其 他 的 方法 存在 很 多 重复 ,这 里 不 再 详细 举 
例 ,可 以 参阅 6.4 节 中 的 “系统 级 别 的 状态 转换 ”内 容 。 

(7) 系统 级 别 的 数据 的 测试 分 析 与 用 例 设计 。 

在 ATM 系统 中 ,所 有 的 实体 之 间 均 存在 着 不 同 的 关系 ,如 一 对 一 、 一 对 多 、 多 对 多 的 关 
系 ,其 中 关系 的 “多 ”也 可 能 是 某 个 有 限 的 具体 值 ,这 些 关 系 是 进行 测试 分 析 和 用 例 设计 的 依 
据 。 这 些 测 试用 例 是 从 数据 的 角度 分 析 并 设计 的 ,所 以 ,一般 作 为 其 他 方法 设计 的 测试 用 例 的 
有 效 补充 。 比 如 ,在 “客户 ”和 “交易 ”两 个 实体 中 ,由 于 “客户 ”和 “交易 ”之 间 是 一 对 多 的 关系 ， 
假定 本 系统 需求 中 规定 一 个 用 户 每 天 只 能 做 20 笔 交易 ,那么 由 于 “客户 ”和 “交易 ”之 间 的 一 对 
多 关系 实际 上 就 是 1 对 20 的 关系 ,可 以 设计 某 账户 一 天 进行 了 20 个 和 20 个 以 上 不 同 ATM 
系统 交易 的 测试 用 例 来 进行 测试 ,以 验证 当 总 交易 数 超过 20 时 以 检查 系统 是 如 何 处 理 的 。 

具体 用 例 这 里 从 略 。 


练习 


1. 简要 分 析 系统 测试 的 类 型 及 其 作用 。 

2. 运用 本 章 中 阐述 的 系统 测试 的 分 析 和 用 例 设计 方法 设计 一 个 自己 熟悉 的 计算 机 系统 
的 系统 测试 用 例 集 并 进行 评审 。 

3. 分 析 系统 测试 对 环境 的 要 求 。 

4. 举 一 个 被 测试 系统 和 硬件 有 接口 的 例子 ,设计 测试 用 例 覆 盖 这 个 接口 。 

5. 举 一 个 被 测试 系统 和 其 他 软件 系统 有 接口 的 例子 ,设计 测试 用 例 覆 盖 这 个 接口 。 


DN 
CHAPTER 7 


第 7 章 


验收 测试 


在 第 1 章 中 对 验收 测试 作 了 简单 描述 ,本 章 将 对 验收 测试 作 详细 
分 析 。 


7.1 验收 测试 概述 


验收 测试 是 软件 开发 结束 后 ,验证 软件 的 功能 和 性 能 及 其 他 特性 是 
否 与 用 户 的 要 求 一 致 。 是 系统 级 别 的 测试 ,但 是 验收 测试 是 客户 进行 的 
测试 或 是 客户 参与 进行 的 测试 。 验 收 测试 包括 用 户 验收 测试 、 系 统管 理 
员 的 验收 测试 (包括 测试 备份 和 恢复 、 灾 难 恢复 、 用 户 管理 ,任务 维护 、 定 
期 的 安全 漏洞 检查 等 )、 基 于 合同 的 验收 测试 ,a 和 有 测试 。 验 收 测试 是 
客户 对 软件 质量 评价 的 一 个 重要 标准 。 

通过 系统 测试 之 后 ,软件 已 完全 组 装 起 来 ,接口 方面 的 缺陷 也 已 排 
除 ,软件 测试 的 最 后 一 步 验收 测试 即 可 开始 。 验 收 测试 的 主要 内 容 是 测 
试 软件 能 否 按 合同 要 求 进行 工作 , 即 是 否 满足 用 户 需 求 说 明 书 中 的 标 
准 。 验 收 测试 对 商品 化 软件 的 品质 从 功能 \ 性 能 、 可 靠 性 , 易 用 性 等 方面 
作 全 面 的 质量 检测 ,帮助 软件 企业 找 出 产品 存在 的 问题 ,出 具 相 应 的 产 
品质 量 报告 。 验 收 测试 要 回答 开发 的 软件 产品 是 否 符合 预期 的 各 项 要 
求 ,以 及 用 户 能 否 接受 的 问题 。 由 于 它 不 只 是 检验 软件 某 个 方面 的 质 
量 , 而 是 要 进行 全 面 的 质量 检验 ,并 且 要 决定 软件 是 否 合 格 , 因 此 验收 测 
试 是 一 项 严格 的 正式 测试 活动 。 需 要 根据 事先 制定 的 计划 ,进行 软件 配 
置 审核 功能 测试 .性 能 测试 等 多 方面 检测 。 

软件 开发 人 员 很 难 完全 预见 用 户 实际 使 用 程序 的 情况 。 例 如 ,用 户 
可 能 错误 的 理解 命令 ,或 提供 一 些 奇怪 的 数据 组 合 ,也 可 能 对 设计 者 自 
认 明 了 的 输出 信息 迷惑 不 解 , 等 等 。 因 此 ,软件 是 否 真正 满足 最 终 用 户 
的 要 求 ,应 由 用 户 进行 一 系列 “验收 测试 >。 有 时 ,验收 测试 长 达 数 周 甚 
至 数 月 ,不断 暴露 缺陷 ,导致 开发 延期 。 一 个 软件 产品 可 能 拥有 众多 用 
户 ,不 可 能 由 每 个 用 户 验 收 ,此 时 多 采用 称 为 a.8 测试 的 过 程 ,以 期 发 现 
那些 似乎 只 有 最 终 用 户 才能 发 现 的 问题 。 

a 测试 是 指 软件 开发 公司 组 织 内 部 人 员 模 拟 各 类 用 户 对 即将 面市 
的 软件 产品 ( 称 为 a 版 本 ) 进 行 测试 ,试图 发 现 软 件 缺 陷 并 修正 。a 测试 的 


关键 在 于 尽 可 能 逼真 地 模拟 实际 运行 环境 和 用 户 对 软件 产品 的 操作 ,并 尽 最 大 努力 涵盖 所 有 
可 能 的 用 户 操作 方式 。 经 过 “测试 后 的 软件 产品 称 为 B 版本。 紧 随 其 后 的 B 测 试 是 指 软件 开 
发 公司 组 织 各 方面 的 典型 用 户 在 日 常 工作 中 实际 使 用 B 版 本 ,并 要 求 用 户 报告 异常 情况 、 提 出 
批评 意见 。 然 后 软件 开发 公司 再 对 B 版 本 进行 改 错 和 完善 。 

验收 测试 应 该 考虑 以 下 主要 测试 内 容 , 这 些 测试 类 型 在 第 6 章 已 经 作 了 详尽 的 分 析 , 只 不 
过 在 验收 测试 中 它们 的 测试 对 象 是 客户 。 

。 安装 测试 ; 

。 功能 测试 ; 

”可 靠 性 测试 ; 

。 安全 性 测试 

。 时 间 及 空间 性 能 测试 ; 

。 易 用 性 测试 
可 移植 性 测试 ; 

可 维护 性 测试 

。 文档 测试 。 

根据 系统 需求 设计 验收 测试 的 测试 用 例 之 后 ,必要 时 还 要 开发 测试 程序 或 脚本 ,然后 再 执 
行 。 如 果 用 户 在 验收 测试 中 发 现 的 所 有 软件 缺陷 的 数量 和 严重 程度 符合 客户 的 预期 且 这 些 缺 
陷 都 已 得 到 解决 ,同时 所 有 的 软件 配置 均 已 更 新 和 审核 ,可 以 反映 出 软件 在 用 户 验收 测试 中 所 
发 生 的 变化 ,a.B 测试 均 已 完成 ,并 对 只 有 最 终 用 户 发 现 的 问题 进行 了 改 错 和 完善 ,用 户 验收 
测试 就 完成 了 。 

用 户 验 收 测试 的 每 一 个 相对 独立 的 部 分 都 应 该 有 目标 (本 步骤 的 目的 ) 启动 标 准 (本 步 又 
必须 满足 的 条 件 )、 活 动 (构成 本 步骤 的 具体 活动 ) 完成 标准 (完成 本 步骤 要 满足 的 条 件 ) 和 度 
量 ( 应 该 收集 的 产品 与 过 程 数据 )。 在 实际 验收 测试 过 程 中 ,收集 度量 数据 不 是 一 件 容易 的 
事情 。 


7.2 验收 测试 过 程 


验收 测试 可 以 分 为 几 个 大 的 部 分 : 验收 测试 标准 的 确认 ,软件 配置 审核 ,可 执行 程序 测 
试 ,ao\B 测试 。 其 大 致 顺序 可 分 为 文档 审核 、 源 代码 审核 配置 脚本 审核 ,测试 程序 或 脚本 审 
核 、 可 执行 程序 测试 ,a、8 测试 。 要 注意 的 是 ,在 开发 方 将 系统 提交 用 户 方 进 行 验收 测试 之 前 ， 
必须 保证 开发 方 本 身 已 经 对 系统 的 各 方面 进行 了 足够 的 系统 测试 或 正式 测试 。 用 户 在 按照 合 
同 接收 并 清点 开发 方 的 交付 物 时 (包括 以 前 已 经 提交 的 ) ,要 查看 开发 方 提供 的 各 种 审核 报告 
和 测试 报告 内 容 是 否 齐 全 。 

1. 验收 测试 标准 的 确认 

实现 软件 验收 测试 是 通过 一 系列 黑 盒 测试 完成 的 。 验 收 测试 同样 需要 制定 测试 计划 和 过 
程 ,测试 计划 应 规定 测试 的 种 类 和 测试 进度 ,测试 过 程 则 定义 测试 的 实施 策略 、 测 试用 例 的 分 
析 和 设计 方法 、 测 试 的 控制 等 一 系列 活动 。 测 试用 例 的 设计 目的 旨 在 说 明 软 件 与 需求 是 否 一 
致 。 无 论 是 计划 还 是 过 程 , 都 应 该 着 重 考虑 软件 是 否 满足 合同 规定 的 所 有 功能 .性 能 及 其 他 需 
求 ,另外 ,还 要 考虑 文档 资料 是 否 完整 、 准 确 , 人 机 界面 和 其 他 方面 (例如 可 移植 性 .兼容 性 、 错 
误 恢复 能 力 和 可 维护 性 等 ) 是 否 令 用 户 满意 。 


验收 测试 的 结果 有 两 种 可 能 : 一 种 是 功能 和 性 能 指标 满足 软件 需求 说 明 的 要 求 , 用 户 可 
以 接受 ; 另 一 种 是 软件 不 满足 软件 需求 说 明 的 要 求 ,用 户 无 法 接受 。 项 目 进行 到 这 个 阶段 才 
发 现 严重 的 缺陷 和 偏差 一 般 很 难 在 预定 的 工期 内 改正 ,因此 必须 与 用 户 协商 ,寻求 一 个 妥善 解 
决 问题 的 方法 。 

2. 配置 复审 

验收 测试 的 另 一 个 重要 环节 是 配置 复审 。 复 审 的 目的 在 于 保证 软件 配置 齐全 、 分 类 有 序 ， 
并 且 包 括 软件 维护 所 必须 的 细节 。 软 件 承 包 方 通常 要 提供 如 下 相关 的 软件 配置 内 容 : 可 执行 
程序 、 源 程序 配置 脚 本 ,测试 程序 或 脚本 。 

主要 的 开发 类 文档 有 (需求 说 明 书 》《 需 求 分 析 说 明 书 》《 概 要 设计 说 明 书 》《 详 细 设 计 说 
明 书 》《 数 据 库 设计 说 明 书 》《 测 试 计划 》《 测 试 报告 )《 程 序 维护 手册 》《 程 序 员 开发 手册 》、 
《用 户 操作 手册 》《 项 目 总 结 报告 } 等 。 

主要 的 管理 类 文档 有 《项目 计划 书 》《 质 量 保证 计划 》《 配置 管理 计划 》《 用 户 培 训 计 划 》、 
《质量 总 结 报告 《评审 报告 《会 议 记 录 》《 开 发 进度 月 报 》 等 。 

在 开发 类 文档 中 ,容易 被 忽视 的 文档 有 《程序 维护 手册 》 和 《程序 员 开 发 手册 》。 《程序 维 护 
手册 ) 的 主要 内 容 包 括 系 统 说 明 ( 包 括 程 序 说 明 ) ,操作 环境 维护 过 程 、 源 代码 清单 等 ,编写 目 
的 是 为 将 来 的 维护 ,修改 和 再 次 开发 工作 提供 有 用 的 技术 信息 。 《程序 员 开发 手册 ) 的 主要 内 
容 包 括 系统 目标 、 开 发 环境 使 用 说 明 测试 环境 使 用 说 明 编码 规范 及 相应 的 流程 等 ,实际 上 就 
是 程序 员 的 培训 手册 。 

不 同 大 小 的 项 目 都 必须 具备 上 述 的 文档 内 容 , 只 是 可 以 根据 实际 情况 进行 重新 组 织 。 通 
常 ,正式 的 审核 过 程 分 为 5 个 步 又: 计划 、 预 备 会 议 ( 可 选 ) 准备 阶段 .审核 会 议和 问题 追踪 。 
预备 会 议 是 对 审核 内 容 进行 介绍 并 讨论 。 准 备 阶段 就 是 各 责任 人 事先 审核 并 记录 发 现 的 问 
题 。 审 核 会 议 是 最 终 确定 工作 产品 中 包含 的 缺陷 。 审 核 要 达到 的 基本 目标 是 根据 共同 制定 的 
审核 表 , 尽 可 能 地 发 现 被 审核 内 容 中 存在 的 问题 .并 最 终 得 到 解决 。 在 根据 相应 的 审核 表 进 行 
文档 审核 和 源 代码 审核 时 ,还 要 注意 文档 与 源 代码 的 一 致 性 。 

在 实际 的 验收 测试 执行 过 程 中 ,常常 会 发 现 文档 审核 是 最 难 的 工作 ,一 方面 由 于 市 场 需求 
等 方面 的 压力 使 这 项 工作 常常 被 弱化 或 推迟 ,造成 持续 时 间 变 长 ,加 大 文档 审核 的 难度 ; 另 一 
方面 ,文档 审核 中 不 易 把 握 的 地 方 非常 多 ,每 个 项 目 都 有 一 些 特别 的 地 方 ,而 且 也 很 难 找到 可 
用 的 参考 资料 。 

3. 可 执行 程序 的 测试 

文档 审核 , 源 代码 审核 .配置 脚本 审核 ,测试 程序 或 脚本 审核 都 顺利 完成 ,就 可 以 进行 验收 
测试 的 可 执行 程序 的 测试 ,包括 功能 ,性 能 等 方面 的 测试 ,每 种 测试 也 都 包括 目标 、 启 动 标准 、 
活动 .完成 标准 和 度量 5 部 分 。 要 注意 的 是 ,不 能 直接 使 用 开发 方 提供 的 可 执行 程序 用 于 验收 
测试 ,而 要 按照 开发 方 提供 的 编译 步骤 ,从 源 代码 重新 生成 可 执行 程序 。 

在 真正 进行 用 户 验收 测试 之 前 一 般 应 该 已 经 完成 了 以 下 工作 (也 可 以 根据 实际 情况 有 选 
择 地 采用 或 增加 ): 

。 软件 开发 已 经 完成 并 进行 了 系统 测试 ,并 全 部 解决 了 已 知 的 缺陷 。 

。 验收 测试 计划 已 经 过 评审 并 批准 ,并 且 置 于 文档 控制 之 下 。 

。 对 软件 需求 说 明 书 的 审查 已 经 完成 。 

。 对 概要 设计 ,详细 设计 的 审查 已 经 完成 。 

。 对 所 有 关键 模块 或 类 的 代码 审查 已 经 完成 。 


。 对 单元 、 集 成 ,系统 测试 计划 和 报告 的 审查 已 经 完成 。 
所 有 的 测试 脚本 已 完成 ,并 至 少 执行 过 一 次 , 且 通 过 评审 。 
使 用 配置 管理 工具 且 代 码 置 于 配置 控制 之 下 。 

。 系统 缺陷 的 处 理 流程 已 经 就 绪 。 

。 已 经 制定 .评审 并 批准 验收 测试 完成 标准 。 

具体 的 测试 内 容 通 常 可 以 包括 安装 (升级 ) 启动 与 关机 、 功 能 测试 ( 正 例 .重要 算法 .边界 、 
时 序 、 反 例 、 错 误 推理 ) ,性 能 测试 (正常 的 负载 ,容量 变化 ) 压力 测试 (临界 的 负载 、 容 量变 化)、 
配置 测试 .平台 测试 、 安 全 性 测试 ,恢复 测试 (在 出 现 掉 电 、 硬 件 故障 或 切换 、 网 络 故障 等 情况 
时 ,系统 是 否 能 够 正常 运行 ) ,可 靠 性 测试 等 。 

性 能 测试 和 压力 测试 一 般 情况 下 是 在 一 起 进行 ,通常 还 需要 辅助 工具 的 支持 。 在 进行 性 
能 测试 和 压力 测试 时 ,测试 范围 必须 限定 在 那些 使 用 频 度 高 的 和 时 间 要 求 苛刻 的 软件 功能 的 
子 集中 。 由 于 开发 方 已 经 事先 进行 过 性 能 测试 和 压力 测试 ,因此 可 以 直接 使 用 开发 方 的 辅助 
工具 。 也 可 以 通过 购买 或 自己 开发 来 获得 辅助 工具 。 有 具体 的 测试 方法 可 以 参阅 本 书 第 9 章 的 
5 区 


7.3 验收 测试 实例 


下 面 以 一 个 ERP 系统 验收 测试 为 例 来 分 析 验 收 测试 。 

1. ERP 验收 测试 的 现状 

验收 测试 是 一 种 有 效 性 测试 或 合格 性 测试 。 它 是 以 用 户 为 主 ,软件 开发 人 员 ,实施 人 员 和 
质量 保证 人 员 共 同 参与 的 测试 。ERP( 企 业 资 源 规划 ) 作 为 提高 企业 管理 创新 能 力 的 有 力 工 
具 ,其 定义 、 设 计 、 开 发 .实施 和 应 用 的 过 程 遵循 一 定 的 规律 。 这 些 规律 表现 在 软件 过 程控 制 、 
质量 保证 和 软件 测试 等 方面 。 验 收 测试 关系 到 ERP 能 否 成 功 验收 ,能 否 平滑 步 和 维护 期 ,能 
否 快速 实现 效益 。ERP 验收 测试 的 全 面 性 ,效率 性 、 科 学 性 、 规 范 性 、 彻 底 性 在 广大 制造 业 企 
业 和 ERP 软件 供应 商 中 还 是 一 个 维新 的 话题 。 当 前 很 多 人 对 ERP 验收 测试 工作 存在 一 些 
误解 : 

(1) 由 于 ERP 软件 的 复杂 性 、 规 模 性 ,人 们 可 能 更 多 地 关注 它 多 变 的 需求 定义 ,个 性 化 解 
决 方案 .定制 化 开发 过 程 , 却 轻视 了 项 目的 验收 工作 。 这 些 * 只 重视 开发 和 过 程 , 不 重视 验收 和 
维护 ”的 做 法 ,最 直接 的 后 果 就 是 形成 了 一 个 个 延期 工程 或 “ 烂 尾 ”项目 。 

(2) ERP 实施 工作 做 好 了 ,用 户 企业 可 以 把 系统 运行 起 来 了 ,文档 移交 了 ,客户 签字 了 ,还 
有 什么 必要 做 验收 测试 。 这 种 误解 源 于 对 验收 测试 的 目的 流程 .方法 和 意义 缺乏 认识 。 

(3) 验收 测试 是 用 户 企业 的 事 ,与 软件 服务 提供 商 无 关 。 事 实 上 ,只 有 两 者 密切 配合 才能 
提高 测试 效率 。 

(4) 将 验收 测试 理解 成 给 用 户 做 演示 。 验 收 测试 要 讲究 策略 ,不 是 走 走 过 场 ,而 是 有 计划 
有 步骤 地 执行 活动 ,要 进行 科学 的 全 面 的 测试 用 例 设计 。 

(5) 验收 测试 就 是 验证 软件 的 正确 性 。 验 收 测试 和 其 他 的 测试 一 样 , 既 要 验证 软件 的 正 
确 性 ,又 要 发 现 软件 缺陷 。 

2. ERP 验收 测试 的 流程 及 方法 原则 

软件 包括 程序 ,数据 和 文档 ,ERP 验收 测试 的 对 象 应 当 涵盖 这 三 个 方面 。 验 收 测试 的 主 
体 要 以 用 户 企 业 为 主 ,ERP 软件 服务 供应 商 积极 配合 ; 或 以 第 三 方 测试 为 主 , 用 户 和 软件 供应 


商 共同 配合 。 

软件 实施 人 员 要 适时 配合 和 敦促 用 户 做 好 验收 测试 的 各 项 准备 工作 , 按 计 划 按 步 又 执行 
验收 测试 ,形成 规范 的 测试 文档 ,客观 地 分 析 和 评估 测试 结果 ,并 跟踪 缺陷 ,对 软件 缺陷 要 分 级 
分 类 管理 ,必要 时 要 进行 回归 测试 ,确保 所 有 问题 能 得 到 关闭 ,最 终 成 功 通过 验收 。 

在 测试 方法 上 ,由 于 验收 阶段 的 特殊 性 ,一般 以 黑 盒 测试 和 配置 复审 为 主 ,以 自动 化 测试 
和 特殊 性 能 测试 为 辅 ,用 户 、 软 件 开发 实施 人 员 和 质量 保证 人 员 共 同 参 与 。 

ERP 验收 测试 要 注意 以 下 4 个 原则 问题 

(1) 验收 测试 始终 要 以 双方 确认 的 ERP 需求 规格 说 明和 技术 合同 为 准 ,确认 各 项 需求 是 
否 得 到 满足 ,各 项 合同 条 款 是 否 得 到 贯彻 执行 。 

(2) 验收 测试 和 单元 测试 .集成 测试 不 同 , 它 是 以 验证 软件 的 正确 性 为 主 ,而 不 是 以 发 现 
软件 缺陷 为 主 。 

(3) 对 验收 测试 中 发 现 的 软件 缺陷 要 分 级 分 类 处 理 , 直 到 通过 验收 为 止 。 

(4) 验收 测试 中 的 用 例 设计 要 具有 全 面 性 、 多 维 性 、 效 率 性 ,能 以 最 少 的 时 间 在 最 大 程度 
上 确认 软件 的 功能 和 性 能 是 否 满足 要 求 。 

3. ERP 验收 测试 的 内 容 及 用 例 设 计 

ERP 验收 测试 的 目的 是 确认 系统 是 否 满足 产品 需求 规格 说 明和 技术 合同 的 相关 规定 。 
通过 实施 预定 的 测试 计划 和 测试 执行 活动 确认 软件 的 功能 需求 .性 能 需求 是 否 满足 及 文档 是 
否 满足 规范 要 求 。ERP 是 较 复杂 的 大 规模 性 软件 ,其 验收 测试 涵盖 的 具体 内 容 包 括 安装 测 
试 、 功 能 测试 .界面 测试 ,性 能 测试 文档 测试 .负载 压力 测试 ,恢复 测试 .安全 性 测试 .兼容 性 测 
试 等 。 下 面 结 合 ERP 验收 测试 的 具体 内 容 分 析 用 例 设 计 的 注意 事项 。 

1) 安装 测试 

安装 测试 的 目的 在 于 验证 软件 能 否 在 不 同 的 配置 情况 下 完成 安装 ,并 确认 能 否 正常 运行 。 
ERP 安装 测试 的 用 例 设计 要 注意 以 下 4 点 : 

(1) 根据 ERP 的 可 移植 性 ,选择 不 同 操作 系统 。 

(2) 选择 不 同 层次 的 硬件 配置 和 软件 配置 ,一 般 选 用 最 低 . 中 等 和 最 高 三 种 配置 进行 测 
试 ,验证 系统 对 软 硬 件 环 境 的 依赖 性 。 

(3) 观察 ERP 安装 程序 在 软 硬 件 资源 充足 的 情况 下 能 否 正常 安装 ,安装 过 程 中 是 否 给 予 
充足 的 提示 ,是 否 存在 流 谍 软件 的 一 些 瞪 病 ,安装 完成 后 能 否 正常 运行 ,能 否 彻 底 删除 。 

(4) 在 资源 不 充沛 的 情况 下 ,如 磁盘 空间 不 够 .内 容 不 足 等 ,系统 能 否 完成 安装 ,能 否 给 予 
各 种 提示 。 

2) 功能 测试 

功能 测试 是 验收 测试 中 的 主要 内 容 。ERP 功能 测试 要 包含 以 下 项 目 : 单个 模块 的 查询 、 
增加 、 删 除 、 修 改 、 保 存 等 操作 ; 数据 的 输入 与 输出 ; 数据 处 理 操作 ,如 导入 、 结 转 等 ; 基础 数据 
定义 的 精度 ; 计算 的 准确 性 ,如 仓库 的 历史 库存 、 当 前 库存 、 货 位 库存 是 否 准 确 ; 数据 共享 能 
力 ; 身份 验证 和 权限 管理 ; 接口 参数 和 系统 控制 参数 ; 单据 流转 情况 ; 状态 控制 ,如 系统 是 否 
对 MPS(Master Production Schedule) 在 执行 MRP(Manufacturing Resource Planning) 分 解 、 
工 单 下 达 、 车 间 任 务 调度 等 操作 前 后 的 状态 做 了 标识 ,状态 的 改变 是 否 正确 ; 报表 的 打印 输 
出 ; 审批 流程 定义 及 各 种 审批 、 反 审批 操作 ; 短信 发 送 及 管理 ; 岗位 及 部 门 业务 的 操作 ,如 从 
采购 管理 、 采 购 计划 到 采购 订单 管理 ,再 到 采购 到 货 管理 ; 跨 部 门 的 业务 操作 ,如 从 销售 订单 
到 主 生 产 计划 ,从 车 间 领 料 到 仓库 出 库 等 。 


ERP 功能 测试 的 用 例 设计 要 注意 以 下 几 点 : 

(1) 测试 项 目的 输入 域 要 全 面 。 要 有 合法 数据 的 输入 ,也 要 有 非法 数据 的 输入 。 如 在 测 
试 基础 数据 的 定义 时 ,车 规定 是 数字 , 则 既 要 输入 数字 进行 测试 ,也 要 输入 字母 .空格 等 非 数 字 
进行 测试 。 数 字 包 含 整 数 、 负 数 、 小 数 , 因 而 还 要 输入 这 些 不 同 的 数字 验证 数字 的 精度 。 

(2) 划分 等 价 类 ,提高 测试 效率 。 在 考虑 测试 域 全 面 性 的 基础 上 ,要 划分 等 价 类 ,选择 有 
代表 意义 的 少数 用 例 进 行 测试 ,提高 测试 效率 。 如 若 MRP 记录 有 “* 刚 形成 "“ 已 派 工 ”“ 正 执 
行 ”“ 已 完成 ”4 种 状态 ,系统 只 允许 对 刚 形成 的 MRP 记录 做 局 部 性 修改 或 删除 操作 ,那么 在 
测试 时 ,将 MRP 记录 划分 为 4 类 ,每 种 状态 对 应 一 类 ,每 类 各 选 一 条 记录 作为 测试 用 例 即 可 。 

(3) 要 适时 利用 边界 值 进 行 测试 。 如 * 订 单 预 排 ?中 一 般 要 求 预 排 的 数量 大 于 0 ,那么 测试 
数据 可 以 分 别 为 0, 一 1,1,5000000,10000000( 一 个 非常 大 的 正 数 ) 。 

(4) 重复 递交 相同 的 事务 。 

(5) 不 按照 常规 的 顺序 执行 功能 操作 。 

(6) 验证 实体 关系 ,实体 间 的 关系 有 三 种 : 一 对 一 ,一 对 多 ,多 对 多 。 如 一 个 MPS 对 应 多 
个 MRP, 一 个 MRP 对 应 多 个 车 间 任 务 。 

(7) 执行 正常 操作 ,观察 输出 结果 的 异常 性 。 如 删除 某 条 记录 对 排序 的 影响 ; 执行 审批 
后 ,单据 的 状态 是 否 改变 。 

3) 界面 测试 

ERP 界面 要 符合 现行 标准 和 用 户 习 惯 。 软 件 企业 可 以 形成 自己 的 特色 ,但 要 确保 整个 软 
件 风格 一 致 。 界 面 测试 要 从 友好 性 、 易 操作 性 、 美 观 性 布局 合理 、 分 类 科学 、 标 题 描述 准确 等 
方面 入手。 测试 用 例 的 设计 要 重点 注意 以 下 几 点 : 

(1) 背景 和 前 景 的 颜色 是 否 协调 ,颜色 反差 是 否 用 得 恰当 。 

(2) 软件 的 图 标 、 按 钮 对话 框 等 外 观 风格 是 否 一 致 ,美观 效果 所 要 求 的 屏幕 分 辩 率 是 否 
符合 要 求 。 

(3) 窗口 元 素 的 布局 是 否 合理 ,并 保持 一 致 。 

(4) 各 种 字段 标题 的 信息 描述 是 否 准确 。 

(5) 快捷 键 .按钮 .鼠标 等 操作 在 软件 中 是 否 一 致 

(6) 窗口 及 报表 的 显示 比例 和 格式 是 否 能 适应 用 户 的 预期 需求 。 

(7) 误 操作 引起 的 错误 提示 是 否 友好 。 

(8) 活动 窗口 和 被 选中 的 记录 是 否 高 亮 显示 。 

(9) 是 否 有 帮助 信息 ,菜单 导航 能 否 正常 执行 。 

(10) 检查 一 些 特殊 域 和 特殊 控件 能 否 运 行 。 

4) 性 能 测试 

性 能 测试 主要 测试 软件 的 运行 速度 和 对 资源 的 消耗 。 通 过 调整 ERP 所 依赖 的 软 硬 件 配 
置 、 网 络 拓扑 结构 .工作 站 点 数 . 数 据 量 和 服务 请 求 数 来 测试 软件 的 移植 性 .运行 速率 .稳定 性 
和 可 靠 性 。 借 助 企业 级 自动 化 测试 工具 来 辅助 测试 ,通过 极限 测试 来 分 析 评 估 软 件 性 能 。 

5) 文档 测试 

文档 是 软件 的 重要 组 成 部 分 ,也 是 软件 质量 保证 和 软件 配置 管理 的 重要 内 容 。 文 档 测试 
主要 通过 评审 的 方式 检查 文档 的 完整 性 ,准确 性 一致 性 、 可 追溯 性 和 可 理解 性 。ERP 作为 一 
个 大 规模 软件 ,覆盖 了 企业 的 各 种 业务 。 它 至 少 要 具备 需求 定义 .分析 和 设计 、 测 试 评估 、 项 目 
管理 ,用户 应 用 这 5 类 文档 ,具体 而 言 , 如 应 包含 GB 8567 一 88 中 规定 的 14 种 软件 文档 。 


在 文档 复审 时 ,要 特别 注意 以 下 几 点 : 

(1) 要 明确 文档 验收 的 标准 ,软件 企业 和 用 户 企业 要 达成 一 致 

(2) 确定 文档 的 重要 性 和 项 目 文档 需求 ,比如 ,在 验收 阶段 ,用 户 文档 (用 户 手 册 、 操 作 手 
册 、 维 护 手册 、 联 机 帮助 文件 ) 显 得 特别 重要 ,需要 认真 评审 。 

(3) 检验 文档 完整 性 ,主要 是 文档 的 种 类 和 内 容 的 完整 性 。 

(4) 检验 文档 的 一 致 性 和 可 追溯 性 ,主要 是 软件 的 分 析 和 设计 描述 是 否 按 照 需求 定义 进 
行 展开 的 ; 应 用 程序 是 否 与 分 析 和 设计 文档 的 描述 一 致 ; 用户 文档 是 否 客观 描述 应 用 程序 的 
实际 操作 ; 关于 同一 问题 的 描述 是 否 存在 不 同 的 说 法 。 

(5) 检验 文档 的 准确 性 ,主要 是 文档 的 描述 是 否 准确 ,有 无 歧义 ,文字 表达 是 否 存在 错误 。 

(6) 检验 文档 的 可 理解 性 ,主要 审核 文档 是 否 针对 特定 的 读者 群体 ,表达 是 否 详细 。 如 
ERP 操作 手册 ,除了 描述 每 个 模块 的 操作 外 ,还 应 该 提供 关联 性 岗位 业务 .部 门 业务 和 器 部 门 
业务 的 操作 说 明 。 

6) 其 他 测试 

除了 上 述 的 测试 外 ,还 有 必要 对 系统 的 其 他 特性 和 需求 加 以 测试 。 如 检测 软件 遇 突 发 性 
故障 后 对 数据 的 恢复 能 力 ,软件 的 安全 保密 性 和 对 硬件 软件 ,数据 的 兼容 性 ,系统 所 能 承担 的 
最 大 数据 量 和 健壮 性 等 。 

在 ERP 系统 中 其 他 测试 考虑 以 下 几 种 : 

(1) 负载 压力 测试 。 主 要 包括 并 发 性 能 测试 .疲劳 强度 测试 ,大 数据 量 测 试 和 速度 测试 。 
一 般 采 用 自动 化 技术 分 别 在 客户 端 ,服务 器 端 和 网 络 上 进行 测试 。 用 例 设 计时 ,要 以 真实 的 业 
务 为 依据 ,选择 有 代表 性 的 、 关 键 的 业务 操作 作为 测试 对 象 。 

(2) 恢复 测试 。 通 过 模拟 硬件 故障 或 故意 造成 软件 出 错 , 检 测 系统 对 数据 的 破坏 程度 和 
可 恢复 的 程度 。 

(3) 安全 性 测试 。 通 过 非法 登录 漏洞 扫描 \ 模 拟 攻击 等 方式 检测 系统 的 认证 机 制 . 加 密 
机 制 、. 防 病毒 功能 等 安全 防护 策略 的 健壮 性 。 

(4) 兼容 性 测试 。 通 过 硬件 兼容 性 测试 ,软件 兼容 性 测试 和 数据 兼容 性 测试 来 考察 软件 
跨 平台 可 移植 的 特性 。 

总 之 ,ERP 用 户 和 软件 开发 实施 人 员 要 明确 验收 测试 的 真正 意图 。 开 发 人 员 和 实施 人 员 
不 应 该 掩盖 软件 缺陷 或 不 关心 用 户 不 熟悉 的 测试 项 目 。 用 户 也 不 能 因为 存在 一 些 当 前 无 法 实 
现 的 需求 而 搁置 验收 工作 。 相 反 ,两 者 应 当 精诚 合作 ,相互 信任 。 对 于 那些 不 可 行 的 需求 或 不 
明确 的 需求 ,双方 要 协商 进行 需求 变更 ,并 达成 一 致意 见 。 只 有 这 样 的 验收 测试 才能 促使 
ERP 工程 项 目 得 以 快速 圆满 验收 。 


练习 


. 简 述 验收 测试 的 过 程 。 

. 验收 测试 中 的 配置 审计 为 什么 重要 ? 举例 说 明 。 

.以 一 个 你 熟悉 的 项 目 为 例 ,全 面 分 析 验 收 测试 的 测试 内 容 。 
. 阐述 验收 测试 和 系统 测试 的 区 别 。 
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CHAPTER 8 


第 8 章 
面向 对 象 软件 测试 


8.1 面向 对 象 技术 简介 


8.1.1 面向 对 象 的 概念 


面向 对 象 的 基本 哲学 认为 世界 是 由 各 种 各 样 具 有 自身 运动 规律 和 
内 部 状态 的 对 象 所 组 成 的 ,不 同 对 象 之 间 的 相互 作用 和 通信 构成 了 完整 
的 现实 世界 。 因 此 ,人 们 应 当 按 照 现实 世界 这 个 本 来 面貌 来 理解 世界 ， 
直接 通过 对 象 及 其 相互 关系 来 反映 世界 。 这 样 建立 起 来 的 系统 才能 符 
合 现实 世 界 的 本 来 面目 。 面 向 对 象 技术 主要 包括 以 下 主要 概念 。 

(1) 类 : 具有 相同 或 相似 性 质 的 对 象 的 抽象 就 是 类 。 因 此 ,对 象 的 
抽象 是 类 ,类 的 具体 化 就 是 对 象 ,也 可 以 说 类 的 实例 是 对 象 。 类 具有 属 
性 , 它 是 对 象 的 状态 的 抽象 ,用 数据 结构 来 描述 类 的 属性 。 类 具有 操作 ， 
它 是 对 象 的 行为 的 抽象 ,用 操作 名 和 实现 该 操作 的 方法 来 描述 。 

(2) 对 象 : 对 象 是 人 们 要 进行 研究 的 任何 事物 ,从 最 简单 的 整数 到 
复杂 的 飞机 等 均 可 看 作对 象 , 它 不 仅 能 表示 具体 的 事物 ,还 能 表示 抽象 
的 规则 、 计 划 或 事件 。 对 象 具有 状态 ,一 个 对 象 用 数据 值 来 描述 它 的 状 
态 。 对 象 还 有 操作 ,用 于 改变 对 象 的 状态 ,操作 就 是 对 象 的 行为 。 对 象 
实现 了 数据 和 操作 的 结合 ,使 数据 和 操作 封装 于 对 象 的 统一 体 中 。 

(3) 封装 : 就 是 把 客观 事物 封装 成 抽象 的 类 ,并 且 类 可 以 把 自己 的 
数据 只 让 可 信和 的 类 或 者 对 象 操作 ,对 不 可 信 的 类 和 对 象 进行 信息 隐藏 。 

(4) 消息 : 对 象 之 间 进 行 通信 的 结构 叫做 消息 。 在 对 象 的 操作 中 ， 
当 一 个 消息 发 送 给 某 个 对 象 时 ,消息 包含 接收 对 象 去 执行 某 种 操作 的 信 
息 。 发 送 一 条 消息 至 少 要 包括 说 明 接受 消息 的 对 象 名 发 送 给 该 对 象 的 
消息 名 ( 即 对 象 名 、 方 法 名 )。 一 般 还 要 对 参数 加 以 说 明 , 参 数 可 以 是 认 
识 该 消息 的 对 象 所 知道 的 变量 名 ,或 者 是 所 有 对 象 都 知道 的 全 局 变 
量 名 。 

(5) 接口 : 一 组 行为 或 操作 的 集合 , 它 将 操作 和 与 其 他 接口 之 间 的 
关系 封装 起 来 ,使 系统 内 部 接口 更 加 规范 。 

(6) 继承 : 继承 是 子 类 自动 共享 父 类 数据 结构 和 方法 的 机 制 ,这 是 
类 之 间 的 一 种 关系 。 在 定义 和 实现 一 个 类 的 时 候 , 可 以 在 一 个 已 经 存在 


的 类 的 基础 之 上 进行 ,把 这 个 已 经 存在 的 类 所 定义 的 内 容 作为 自己 的 内 容 ,并 可 加 入 若干 新 的 
内 容 。 

(7) 多 态 : 多 态 性 是 指 相 同 的 操作 或 函数 、 过 程 可 作用 于 多 种 类 型 的 对 象 上 并 获得 不 同 
的 结果 。 不 同 的 对 象 , 收 到 同一 消息 可 以 产生 不 同 的 结果 ,这 种 现象 称 为 多 态 性 。 


8.1.2 面向 对 象 的 开发 模式 


面向 对 象 的 开发 模型 是 将 软件 开发 过 程 分 成 三 个 主要 阶段 , 即 面 向 对 象 分 析 (OOA)、 面 
向 对 象 设计 (OOD) 和 面向 对 象 编程 (OOP) 。 分 析 是 把 问题 空间 进行 分 解 , 找 出 这 些 分 解 部 分 
的 特点 及 其 相互 关系 ,并 产生 一 个 规格 说 明 书 。 面 向 对 象 的 分 析 要 求 把 问题 空间 分 解 成 一 些 
类 或 对 象 , 找 出 这 些 对 象 的 特点 ( 即 属 性 和 服务 ) ,以 及 对 象 间 的 关系 (一 般 与 特殊 ,整体 与 部 
分 ) ,并 由 此 产生 一 个 规格 说 明 。 面 向 对 象 设计 是 对 OOA 产生 的 结果 ,增加 在 实际 的 计算 机 
系统 中 实现 所 需 的 细节 ,包括 人 机 交互 ,任务 管理 和 数据 管理 的 细节 。 从 OOA 转 到 OOD 是 
一 个 累进 的 模型 扩充 过 程 。OOA 的 各 层 模 型 化 了 “问题 空间 ”。 而 OOD 则 模型 化 了 一 个 特 
定 的 “实现 空间 ”。 编 程 (OOP) 阶 段 是 软件 产品 直接 的 生产 过 程 ,程序 员 根 据 分 析 和 设计 的 结 
果实 现 软件 产品 ,编程 过 程 当中 应 随时 对 不 合理 的 设计 结果 进行 反馈 。 


8.1.3 统一 建 模 语言 


UML(Unified Modeling Language, 统 一 建 模 语 言 或 标准 建 模 语 言 ) 始 于 1997 年 一 个 
OMG 标准 , 它 是 一 个 支持 模型 化 和 软件 系统 开发 的 图 形 化 语言 ,为 软件 开发 的 所 有 阶段 提供 
模型 化 和 可 视 化 支持 。 

面向 对 象 的 分 析 与 设计 方法 的 发 展 在 20 世纪 80 年 代 末 至 90 年 代 中 出 现 了 一 个 高 潮 ， 
UML 是 这 个 高 潮 的 产物 。 它 不 仅 统一 了 Booch、Rumbaugh 和 Jacobson 的 表示 方法 ,而 且 对 
其 作 了 进一步 的 发 展 , 并 最 终 统一 为 大 众 所 接受 的 标准 建 模 语言 。UML 是 一 种 定义 良好 、 易 
于 表达 、 功 能 强大 且 普 遍 适 用 的 建 模 语言 。 它 融入 了 软件 工程 领域 的 新 思想 .新 方法 和 新 技 
术 。 它 的 作用 域 不 限于 支持 面向 对 象 的 分 析 与 设计 ,还 支持 从 需求 分 析 开 始 的 软件 开发 的 全 
过 程 。 

作为 一 种 建 模 语言 ,UML 的 定义 包括 UML 语义 和 UML 表示 法 两 个 部 分 。 

(1) UML 语义 是 描述 基于 UML 的 精确 元 模型 定义 。 元 模型 为 UML 的 所 有 元 素 在 语 
法 和 语义 上 提供 了 简单 .一致 .通用 的 定义 性 说 明 ,使 开发 者 能 在 语义 上 取得 一 致 ,消除 了 因 人 
而 异 的 最 佳 表达 方法 所 造成 的 影响 。 此 外 ,UML 还 支持 对 元 模型 的 扩展 定义 。 

(2) UML 表示 法 是 定义 UML 符号 的 表示 法 ,为 开发 者 或 开发 工具 使 用 这 些 图 形 符号 和 
文本 语法 、 为 系统 建 模 提 供 了 标准 。 这 些 图 形 符 号 和 文字 所 表达 的 是 应 用 级 的 模型 ,在 语义 上 
它 是 UML 元 模型 的 实例 。 

UML 的 主要 内 容 可 以 由 下 列 5 类 图 ( 共 9 种 图 形 ) 来 定义 。 

。 用 例 图 (Use Case Diagram) 。 从 用 户 角 度 描 述 系统 功能 ,并 指出 各 功能 的 操作 者 。 

。 静态 图 (Static Diagram)。 包 括 类 图 、 对 象 图 和 包 图 。 其 中 类 图 描述 系统 中 类 的 静态 

结构 。 不 仅 定 义 系统 中 的 类 ,表示 类 之 间 的 联系 如 关联 依赖、 聚合 等 ,也 包括 类 的 内 
部 结构 (类 的 属性 和 操作 )。 类 图 描述 的 是 一 种 静态 关系 ,在 系统 的 整个 生命 周期 都 是 
有 效 的 。 对 象 图 是 类 图 的 实例 ,几乎 使 用 与 类 图 完全 相同 的 标识 。 它 们 的 不 同 点 在 于 
对 象 图 显示 类 的 多 个 对 象 实例 ,而 不 是 实际 的 类 。 一 个 对 象 图 是 类 图 的 一 个 实例 。 由 


于 对 象 存在 生命 周期 ,因此 对 象 图 只 能 在 系统 某 一 时 间 段 存在 。 包 图 由 包 或 类 组 成 ， 
表示 包 与 包 之 间 的 关系 。 包 图 用 于 描述 系统 的 分 层 结构 。 
行为 图 (Behavior Diagram) 。 描 述 系统 的 动态 模型 和 组 成 对 象 间 的 交互 关系 。 其 中 状 
态 图 描述 类 的 对 象 所 有 可 能 的 状态 ,以 及 事件 发 生 时 状态 的 转移 条 件 。 通 常 ,状态 图 
是 对 类 图 的 补充 。 实 用 上 并 不 需要 为 所 有 的 类 画 状 态 图 , 仅 为 那些 有 多 个 状态 、 其 行 
为 受 外 界 环境 的 影响 并 且 发 生 改 变 的 类 画 状 态 图 。 而 活动 图 描述 了 满足 用 例 要 求 所 
要 进行 的 活动 ,以 及 活动 间 的 约束 关系 ,有 利于 识别 并 行 活动 。 
交互 图 (Interactive Diagram) 。 描 述 对 象 间 的 交互 关系 。 其 中 顺序 图 显示 对 和 象 之 间 的 
动态 合作 关系 , 它 强 调 对 象 之 间 消 息 发 送 的 顺序 ,同时 显示 对 象 之 间 的 交互 。 合 作 图 
描述 对 象 间 的 协作 关系 ,合作 图 和 顺序 图 相似 ,显示 对 象 间 的 动态 合作 关系 。 除 显示 
信息 交换 外 ,合作 图 还 显示 对 象 , 以 及 它们 之 间 的 关系 。 如 果 强 调 时 间 和 顺序 , 则 使 用 
顺序 图 ; 如 果 强 调 上 下 级 关系 , 则 选择 合作 图 。 这 两 种 图 合 称 为 交互 图 。 
实现 图 (Implementation Diagram) 。 其 中 构件 图 描述 代码 部 件 的 物理 结构 及 各 部 件 之 
间 的 依赖 关系 。 一 个 部 件 可 能 是 一 个 资源 代码 部 件 、 一 个 二 进 制 部 件 或 一 个 可 执行 部 
件 。 它 包含 迎 辑 类 或 实现 类 的 有 关 信息 。 部 件 图 有 助 于 分 析 和 理解 部 件 之 间 的 相互 
影响 程度 。 配 置 图 定义 系统 中 软 硬 件 的 物理 体系 结构 。 它 可 以 显示 实际 的 计算 机 和 
设备 (用 结 点 表示 ) ,以 及 它们 之 间 的 连接 关系 ,也 可 显示 连接 的 类 型 及 部 件 之 间 的 依 
赖 性 。 在 结 点 内 部 ,放置 可 执行 部 件 和 对 象 以 显示 结 点 和 执行 软件 单元 的 对 应 关系 。 

当 采 用 面向 对 象 技术 设计 系统 时 ,第 一 步 是 描述 需求 ; 第 二 步 是 根据 需求 建立 系统 的 静 
态 模 型 ,以 构造 系统 的 结构 ; 第 三 步 是 描述 系统 的 行为 。 其 中 在 第 一 步 与 第 二 步 中 所 建立 的 
模型 都 是 静态 的 ,包括 用 例 图 、 类 图 (包含 包 ) 、 对 象 图 、 组 件 图 和 配置 图 5 个 图 形 , 是 UML 的 
静态 建 模 机 制 。 其 中 第 三 步 所 建立 的 模型 或 者 可 以 执行 ,或 者 表示 执行 时 的 时 序 状态 或 交互 
关系 ,包括 状态 图 、 活 动 图 ,顺序 图 和 合作 图 4 个 图 形 , 是 UML 的 动态 建 模 机 制 。 因 此 ,UML 
的 主要 内 容 也 可 以 归纳 为 静态 建 模 机 制 和 动态 建 模 机 制 两 大 类 。 

UML 的 目标 是 以 面向 对 象 图 的 方式 来 描述 任何 类 型 的 系统 ,具有 很 宽 的 应 用 领域 。 其 
中 最 常用 的 是 建立 软件 系统 的 模型 ,但 它 同 样 可 以 用 于 描述 非 软 件 领域 的 系统 ,如 机 械 系统 、 
企业 机 构 或 业务 过 程 , 以 及 处 理 复杂 数据 的 信息 系统 .具有 实时 要 求 的 工业 系统 或 工业 过 程 
等 。 总 之 ,UML 是 一 个 通用 的 标准 建 模 语言 ,可 以 对 任何 具有 静态 结构 和 动态 行为 的 系统 进 
行 建 模 。 此 外 ,UML 适用 于 系统 开发 过 程 中 从 需求 规格 描述 到 系统 完成 后 测试 的 不 同 阶段 。 
在 需求 分 析 阶 段 ,可 以 用 用 例 来 捕获 用 户 需 求 。 通 过 用 例 建 模 ,描述 对 系统 感 兴趣 的 外 部 角色 
及 其 对 系统 (用 例 ) 的 功能 要 求 。 分 析 阶 段 主要 关心 问题 域 中 的 主要 概念 (如 抽象 .类 和 对 象 
等 ) 和 机 制 ,需要 识别 这 些 类 以 及 它们 相互 间 的 关系 ,并 用 UML 类 图 来 描述 。 为 实现 用 例 , 类 
之 间 的 协作 ,可 以 用 UML 动态 模型 来 描述 。 在 分 析 阶 段 , 只 对 问题 域 的 对 象 (现实 世界 的 概 
念 ) 建 模 ,而 不 考虑 定义 软件 系统 中 技术 细节 的 类 (如 处 理 用 户 接 口 数据库、 通信 和 和 并行 性 等 
问题 的 类 )。 这 些 技 术 细 节 将 在 设计 阶段 引入 ,因此 设计 阶段 为 构造 阶段 提供 更 详细 的 规格 
说 明 。 

编程 (构造 ) 是 一 个 独立 的 阶段 ,其 任务 是 用 面向 对 象 编程 语言 将 来 自 设计 阶段 的 类 转换 
成 实际 的 代码 。 在 用 UML 建立 分 析 和 设计 模型 时 ,应 尽量 避免 考虑 把 模型 转换 成 某 种 特定 
的 编程 语言 。 因 为 在 早期 阶段 ,模型 仅仅 是 理解 和 分 析 系 统 结构 的 工具 ,过 早 考虑 编码 问题 十 
分 不 利于 建立 简单 正确 的 模型 。 


UML 模型 还 可 作为 测试 阶段 的 依据 。 系 统 通常 需要 经 过 单元 测试 .集成 测试 .系统 测试 
和 验收 测试 。 不 同 的 测试 阶段 使 用 不 同 的 UML 图 作为 测试 依据 : 单元 测试 使 用 类 图 和 类 规 
格 说 明 ; 集成 测试 使 用 部 件 图 (协作 图 合作 图 或 序列 图 ; 系统 测试 使 用 用 例 图 来 验证 系统 
的 行为 ; 验收 测试 由 用 户 进行 ,以 验证 系统 测试 的 结果 是 否 满足 在 需求 阶段 确定 的 需求 。 


8.2 面向 对 象 测试 模型 


由 于 面向 对 象 软件 的 开发 具有 如 类 继承 .接口 封装 支持 等 特性 ,对 面向 对 象 的 软件 测试 提 
出 了 新 要 求 。 尽 管 如 此 ,面向 对 象 软件 的 测试 与 传统 软件 的 测试 仍然 非常 类 似 : 虽然 “单元 ” 
的 范围 已 经 拓展 ,不 是 基于 模块 进行 测试 ,但 仍然 需要 做 单元 测试 ; 仍然 需要 做 集成 测试 以 保 
证 各 种 类 型 的 子 系统 可 以 协调 运行 ; 仍然 需要 做 系统 测试 以 确保 软件 能 满足 需求 ; 仍然 需要 
做 回归 测试 以 保证 最 后 一 轮 的 修改 不 会 对 软件 以 前 的 部 分 产生 进一步 的 影响 ; 最 后 还 需要 进 
行 验收 测试 。 对 于 面向 对 象 而 言 , 验 收 测试 没有 其 特殊 性 ,本 章 不 做 额外 分 析 。 

根据 面向 对 象 的 软件 开发 模式 ,可 以 将 面向 对 象 的 测试 模型 划分 为 : 

。 面向 对 象 分 析 的 测试 (OOA Test); 

。 面向 对 象 设计 的 测试 (OOD Test); 

。 面向 对 象 编程 的 测试 (OOP Test); 

。 面向 对 象 单元 测试 (OO Unit Test); 

。 面向 对 象 集成 测试 (OO Integration Test) ; 

。 面向 对 象 系统 测试 (OO System Test) 。 

这 种 划分 方式 得 到 了 业内 的 认可 ,实践 检验 是 可 行 的 。 然 而 由 于 面向 对 象 技术 有 比较 广 
泛 的 外 延性 ,软件 开发 过 程 不 可 能 完全 相同 ,对 于 面向 对 象 的 测试 的 划分 在 业内 还 存在 其 他 不 
同 的 划分 形式 ,这 些 划分 形式 也 是 有 效 的 ,例如 ,将 面向 对 象 的 软件 测试 模型 划分 成 如 下 形式 ， 

(1) 模型 测试 ; 

(2) 类 测试 (用 于 代替 单元 测试 ); 

(3) 交互 测试 (用 于 代替 集成 测试 ); 

(4) 系统 (包括 子 系统 ) 测 试 ; 

(5) 验收 测试 ; 

(6) 部 署 测试 。 

传统 测试 模型 与 面向 对 象 的 测试 模型 相 比 ,面向 对 象 的 测试 更 关注 对 象 而 不 仅仅 是 完成 
输入 输出 的 单一 功能 ,所 以 ,面向 对 象 的 测试 可 以 在 分 析 与 设计 阶段 就 先行 介入 ,使 得 测试 更 
好 地 配合 软件 开发 过 程 , 提 高 软件 开发 过 程 的 工作 产品 的 质量 。 


8.3 面向 对 象 的 用 例 设 计 方 法 


基于 面向 对 象 的 测试 用 例 设计 方法 除了 使 用 在 第 3 章 中 描述 的 方法 之 外 ,在 本 节 中 将 根 
据 面向 对 象 的 特点 来 介绍 测试 用 例 的 设计 。 
8.3.1 基于 缺陷 的 测试 


基于 缺陷 的 测试 与 传统 的 错误 推测 法 类 似 。 首 先 ,推测 软件 中 可 能 有 错误 或 缺陷 ,然后 设 


计 出 可 能 发 现 这 些 错误 或 缺陷 的 测试 用 例 。 为 了 推测 出 软件 中 可 能 存在 的 错误 或 缺陷 ,应 该 
仔细 研究 分 析 模型 和 设计 模型 ,很 大 程度 上 要 依靠 测试 人 员 的 经 验 。 为 了 确定 这 些 缺 陷 是 否 
存在 ,可 设计 用 例 去 执行 软件 。 

看 一 个 简单 的 例子 。 软 件 开发 人 员 经 常 忽略 问题 的 边界 ,例如 , 当 测 试 divide 操作 (该 操 
作对 负数 和 0 返回 错误 ) 时 ,我 们 考虑 边界 ,“ 零 本 身 " 用 于 检查 是 否 程序 员 犯 了 如 下 错误 : 


if(x>0)divide( ); 
而 不 是 正确 的 : 
if(x>= 0)divide(); 


当然 ,这 种 方法 的 有 效 性 依赖 于 测试 人 员 如 何 感 觉 * 似 乎 可 能 的 缺陷 ”, 如 果 OO 系统 中 的 
真实 缺陷 被 感觉 为 "难以 置信 的 ”, 则 本 方法 实质 上 不 比 任何 随机 测试 技术 好 。 但 是 ,如 果 可 以 
从 分 析 和 设计 模型 进行 深入 的 检查 ,那么 基于 缺陷 的 测试 则 可 以 用 相当 低 的 工作 量 来 发 现 大 
量 的 错误 。 

基于 缺陷 测试 也 可 以 用 于 集成 测试 ,集成 测试 可 以 发 现 消息 之 间 “ 可 能 的 缺陷 ”。“ 可 能 的 
缺陷 ”一 般 为 意料 之 外 的 结果 、 错 误 地 使 用 了 操作 /消息 、 不 正确 的 引用 等 。 为 了 确定 由 操作 
(功能 ) 引 起 的 可 能 缺陷 ,必须 检查 操作 的 行为 。 

这 种 方法 除 用 于 操作 测试 外 ,还 可 用 于 属性 测试 ,用 以 确定 其 对 于 不 同类 型 的 对 象 行为 是 
否 赋予 了 正确 的 属性 值 。 因 为 一 个 对 象 的 “属性 ?是 由 其 赋予 属性 的 值 定义 的 。 

应 当 指出 ,集成 测试 是 从 客户 对 象 (主动 ) ,而 不 是 从 服务 器 对 象 (被 动 ) 上 发 现 错误 。 正 如 
传统 的 软件 集成 测试 是 把 注意 力 集中 在 调用 代码 ,而 不 是 被 调用 代码 一 样 , 即 发 现 客户 对 象 中 
“可 能 的 缺陷 ”。 


8.3.2 0O0O 类 的 随机 测试 


如 果 一 个 类 有 多 个 操作 (功能 ) ,这 些 操 作 ( 功 能 ) 序 列 有 多 种 排列 ,而 这 种 不 变化 的 操作 序 
列 可 随机 产生 ,用 这 种 可 随机 排列 的 序列 来 检查 不 同类 实例 的 生存 史 就 叫 随机 测试 。 

为 了 简要 地 说 明 本 方法 ,考虑 一 个 记事 本 的 应 用 软件 。 在 这 个 应 用 中 ,类 text 有 以 下 操 
作 : open( 打 开 ) ,new( 新 建 ), read( 读 取 ), write( 写 入 ) .copy( 复 制 ),paste( 粘 贴 ) ,view( 查 
看 ) ,save( 保 存 ) 和 close( 关 闭 ) 。 这 些 操作 的 每 一 个 都 能 应 用 于 类 text, 但 是 由 于 这 个 问题 的 
本 质 具有 某 些 约 东 条 件 ,例如 在 其 他 操作 执行 之 前 ,必须 首先 执行 open 操作 ,并且 在 所 有 其 他 
操作 执行 完成 后 ,最 后 必须 执行 close 操作 。 对 于 约束 ,还 存在 这 些 操作 的 许多 不 同 的 排列 。 
text 的 一 个 最 小 操作 序列 为 open 十 new 十 write 十 save 十 close。 

另外 ,有 其 他 很 多 行为 可 以 出 现在 这 个 序列 中 : open 十 new 十 write 十 [read| write|copy | 
paste] 十 save 十 close, 这 样 可 以 随机 地 生成 一 系列 不 同 的 操作 序列 作为 测试 用 例 ,测试 类 实例 
的 不 同 生存 历史 。 

再 如 ,一 个 银行 信用 卡 的 应 用 ,其 中 有 一 个 类 一 一 账户 (account)。 该 account 的 操作 有 
open、setup、deposit、withdraw、balance、summarize、creditlimit 和 close。 这 些 操作 中 的 每 一 
项 都 可 用 于 计算 ,但 open、close 必须 在 其 他 计算 的 任何 一 个 操作 前 后 执行 ,即使 open 和 close 
有 这 种 限制 ,这 些 操作 仍 有 多 种 排列 ,所 以 一 个 不 同 变 化 的 操作 序列 可 由 于 应 用 不 同 而 随机 产 
生 。 如 一 个 account 实例 的 最 小 行为 转换 期 可 包括 以 下 操作 : 

open 十 setup 十 deposit 十 withdraw 十 close 


这 表示 了 对 account 的 最 小 测试 序列 。 然 而 ,在 下 面 序列 中 可 能 发 生 大 量 的 其 他 行为 : 
open 十 setup 十 deposit 十 [deposit| withdraw|balance| summarize| creditlimit] 十 withdraw 十 close 
由 此 可 以 随机 产生 一 系列 不 同 的 操作 序列 。 

测试 用 例 1: 

open 十 setup 十 deposit 十 deposit 十 balance 十 summarize 十 withdraw 十 close 

测试 用 例 2: 

open 十 setup 十 deposit 十 withdraw 十 deposit 十 balance 十 creditlimit 十 withdraw 十 close 

可 以 执行 这 些 测试 和 其 他 的 随机 顺序 测试 ,以 测试 不 同 的 类 实例 生命 历史 。 


8.3.3 类 层次 的 划分 测试 


这 种 测试 可 以 减少 用 完全 相同 的 方式 检查 类 测试 用 例 的 数目 。 这 很 像 传统 软件 测试 中 的 
等 价 类 划分 测试 。 划 分 测试 又 可 分 为 三 种 。 

(1) 基于 状态 的 划分 。 按 类 操作 是 否 改变 类 的 状态 来 进行 划分 ( 归 类 )。 这 里 仍 用 
account 类 为 例 ,改变 状态 的 操作 有 deposit、 withdraw, 不 改变 状态 的 操作 有 balance、 
summarize 和 creditlimit。 如 果 测 试 按 检 查 类 操作 是 否 改变 类 状态 来 设计 , 则 结果 如 下 : 

[用 例 1]: 执行 操作 改变 状态 。 

open 十 setup 十 deposit 十 deposit 十 withdraw 十 withdraw 十 close 

[用 例 2]: 执行 操作 不 改变 状态 。 

open 十 setup 十 summarize 十 creditlimit 十 close 

(2) 基于 属性 的 划分 。 按 类 操作 所 用 到 的 属性 来 划分 ( 归 类 )。 如 果 仍 以 一 个 account 类 
为 例 , 其 属性 creditlimit 能 被 划分 为 三 种 操作 : 用 creditlimit 的 操作 ,修改 creditlimit 的 操作 ， 
不 用 也 不 修改 creditlimit 的 操作 。 这 样 ,测试 序列 就 可 按 每 种 划分 来 设计 。 

(3) 基于 类 型 的 划分 。 按 完成 的 功能 划分 ( 归 类 )。 例 如 ,在 account 类 的 操作 中 ,可 以 划 
分 为 初始 操作 : open setup; 计算 操作 : deposit withdraw; 查询 操作 : balance、summarize、 
creditlimit; 终止 操作 : close。 


8.3.4 类 行为 模型 测试 


状态 转换 图 (STD) 可 以 用 来 帮助 导出 类 的 动态 行为 的 测试 序列 ,以 及 这 些 类 与 之 合作 的 
类 的 动态 行为 测试 序列 。 


为 了 说 明 问 题 , 仍 使 用 前 面 讨 论 过 的 一 | Working | -| working 
account 类 。 开 始 由 empty acct 状态 转换 为 open setup Acct Deposit(initial) 
setup acct 状态 。 类 实例 的 大 多 数 行为 发 生 在 tf ) aposi 
working acct 状态 中 。 而 最 后 ,取款 和 关闭 分 Working 
别 使 account 类 转 换 到 non-working acct 和 CD UC) Withdaw 
dead acct 状态 。 图 8-1 所 示 为 状态 转换 图 。 Ue a Aina) 
这 样 ,设计 的 测试 用 例 应 当 是 完成 所 有 的 ei 
状态 转换 。 换 句 话说 ,操作 序列 应 当 能 导致 图 8-1 状态 转换 图 
account 类 所 有 人 允许 的 状态 至 少 进行 一 次 转换 。 
测试 用 例 1: 


open 十 setupAcct 十 deposit(Cinitial) 十 withdraw(final) 十 close 
应 该 注意 ,该 序列 等 同 于 一 个 最 小 测试 序列 ,加 入 其 他 测试 序列 到 最 小 序列 中 。 


测试 用 例 2 : 

open 十 setupAcct 十 deposit(initial) 十 deposit 十 balance 十 credit 十 withdraw(final) 十 close 

测试 用 例 3: 

open 十 setupAcct 十 deposit(initial) 十 deposit 十 withdraw 十 accntlnfo 十 withdraw(final) 十 close 

还 可 以 导出 更 多 的 测试 用 例 , 以 保证 该 类 所 有 行为 被 充分 检查 。 在 类 行为 导致 与 一 个 或 
多 个 类 协作 的 情况 下 ,可 使 用 多 个 STD 去 跟踪 系统 的 行为 流 。 

面向 对 象 测试 的 整体 目标 是 以 最 小 的 工作 量 发 现 最 多 的 错误 ,和 传统 软件 测试 的 目标 是 
一 致 的 ,但 是 由 于 OO 软件 具有 的 特殊 性 质 ,在 测试 的 策略 和 战术 上 有 很 大 不 同 。 测 试 的 视角 
扩大 到 包括 复审 分 析 和 设计 模型 ,此 外 ,测试 的 焦点 从 过 程 构件 (模块 ) 移 向 了 类 。 

。 OOA(Object-Oriented Analysis) 和 OOD(Object-Oriented Design) 的 评审 与 传统 软件 

的 分 析 和 设计 相同 ,应 给 出 相应 的 评审 检查 表 。 

。 OOP(Object-Oriented Programming) 后 ,单元 和 组 装 测试 策略 必须 作 相应 的 改变 。 

。 测试 用例 设计 必须 说 明 OO 软件 特有 的 性 质 。 

有 关 类 行为 状态 测试 在 8. 4. 4 节 还 将 涉及 。 


8.4 面向 对 象 测试 的 策略 


8.4.1 面向 对 象 分 析 的 测试 


1. 面向 对 象 的 分 析 

传统 的 系统 分 析 方 式 的 重点 是 功能 分 解 ,把 一 个 系统 看 成 可 以 分 解 的 功能 的 集合 ,由 于 大 
量 散 列 的 信息 导致 分 析 结 果 不 可 控 , 这 种 方式 越 来 越 难 满足 越 来 越 复杂 的 软件 需求 。 与 传统 
软件 系统 分 析 不 同 ,面向 对 象 分 析 主 要 围绕 映射 问题 空间 展开 ,将 具体 的 问题 空间 实例 抽象 为 
对 象 , 用 对 象 的 结构 反映 问题 空间 的 复杂 实例 和 复杂 关系 ,用 属性 和 服务 表示 实例 的 特性 和 行 
为 。 并 寻找 最 符合 实际 情况 的 迎 辑 来 构造 软件 ,使 之 与 现实 情况 相对 应 。 把 面向 对 象 分 析 的 
基本 活动 分 为 : 

。 识别 对 象 和 类 。 

。 描述 对 象 和 类 之 间 的 关系 。 

。 描述 对 象 的 行为 。 

这 三 种 基本 活动 贯穿 于 整个 OOA 的 过 程 中 。 由 于 在 整个 软件 开发 过 程 中 存在 迭代 , 因 
此 OOA 的 这 三 个 基本 活动 都 会 不 断 地 进行 ,不 断 地 遍历 系统 中 遗漏 的 对 象 ,去 除 宛 余 的 方法 
与 属性 。 面 向 对 象 的 分 析 过 程 需要 产生 如 下 结果 。 

(1) 已 获取 的 用 户 需求 (一 般 用 模型 或 者 是 文档 方式 给 出 ) 。 

(2) 以 既定 需求 为 参考 的 确认 类 和 对 象 。 

(3) 定义 系统 类 的 属性 与 操作 。 

(4) 建立 对 象 关 系 模 型 。 

(5) 建立 对 象 操作 模型 。 

2. OOA 测试 的 内 容 

结合 OOA 的 模型 ,OOA 测试 的 范围 规定 如 下 所 示 ,测试 的 方法 一 般 采 用 静态 测试 技术 。 

(1) 对 需求 的 测试 。 主 要 是 以 OOA 中 的 Use Case 图 为 依据 进行 需求 的 验证 。 可 以 根据 


Use Case 图 将 需求 划分 成 不 同 的 级 别 , 依 据 不 同 级 别 的 需求 场景 分 别 对 需求 进行 验证 。 在 验 
证 过 程 中 可 能 要 涉及 除 功能 之 外 的 其 他 特性 ,这 些 特 性 需要 在 验证 中 考虑 ,但 一 般 在 本 阶段 验 
证 较为 困难 。 

(2) 对 确认 对 象 的 测试 。 已 确认 的 对 象 是 对 客观 存在 的 服务 映射 空间 ,其 测试 的 重点 主 
要 放 在 检查 已 确认 对 象 是 否 有 宛 余 的 方法 和 属性 ,是 否 有 遗漏 的 信息 等 。 对 它 的 测试 可 以 从 
如 下 方面 考虑 : 
确认 的 对 象 是 否 全 面 , 是 否 问题 空间 中 所 有 涉及 的 实例 都 反映 在 确认 的 抽象 对 象 中 。 
确认 的 对 象 是 否 具有 多 个 属性 。 只 有 一 个 属性 的 对 象 通常 合并 作为 其 他 相关 对 象 的 
属性 ,而 不 应 该 抽象 为 独立 的 对 象 。 

对 确认 为 同一 对 象 的 实例 是 否 有 共同 的 区 别 于 其 他 实例 的 共同 属性 。 

对 确认 为 同一 对 象 的 实例 是 否 提供 或 需要 相同 的 服务 ,如 果 服 务 随 着 实例 的 不 同 而 变 
化 ,确认 的 对 象 就 需要 分 解 或 利用 继承 性 来 分 类 表示 。 

如 果 系 统 没有 必要 始终 保持 对 象 代表 实例 的 信息 ,提供 或 者 得 到 关于 它 的 服务 、 确 认 
的 对 象 也 无 必要 。 

确认 的 对 象 的 名 称 应 该 尽量 准确 .适用 、 便 于 理解 。 

(3) 对 确认 结构 的 测试 。 确 认 的 结构 主要 反映 的 是 目标 系统 框架 的 映射 。 这 一 部 分 的 测 
试 主要 是 检查 既定 需求 的 正确 性 和 完整 性 , 找 出 潜在 冲突 的 需求 。 确 认 的 结构 指 的 是 多 种 对 
象 的 组 织 方式 ,用 来 反映 问题 空间 中 的 复杂 实例 和 复杂 关系 。 确 认 的 结构 分 为 两 种 : 分 类 结 
构 和 组 装 结构 。 分 类 结构 体现 了 问题 空间 中 实例 的 一 般 与 特殊 关系 ,组 装 结构 体现 了 问题 空 
间 中 实例 的 整体 与 局 部 关系 。 

对 确认 的 分 类 结构 的 测试 可 从 如 下 方面 着 手 : 

。 对 于 结构 中 的 一 种 对 象 ,尤其 是 处 于 高 层 的 对 象 ,是 否 在 问题 空间 中 含有 不 同 于 下 一 
层 对 象 的 特殊 的 可 能 性 , 即 是 否 能 派生 出 下 一 层 对 象 。 

对 于 结构 中 的 一 种 对 象 ,尤其 是 处 于 同一 低层 的 对 象 ,是 否 能 抽象 出 在 现实 中 有 意义 
的 更 一 般 的 上 层 对 象 。 

对 所 有 确认 的 对 象 , 是 否 能 在 问题 空间 内 向 上 层 抽 象 出 在 现实 中 有 意义 的 对 象 。 

高 层 对 象 的 特性 是 否 完全 体现 下 层 的 共性 。 

。 低层 对 象 是 否 有 高 层 特 性 基础 上 的 特殊 性 。 

对 确认 的 组 装 结构 的 测试 从 如 下 方面 人 手 : 

。 整体 (对 象 ) 和 部 件 ( 对 象 ) 的 组 装 关系 是 否 符合 现实 的 关系 。 

。 整体 (对 象 ) 的 部 件 (对 象 ) 是 否 在 考虑 的 问题 空间 中 有 实际 应 用 。 

。 整体 (对 象 ) 中 是 否 遗 漏 了 反映 在 问题 空间 中 有 用 的 部 件 ( 对 象 ) 。 

。 部 件 ( 对 象 ) 是 否 能 够 在 问题 空间 中 组 装 新 的 有 现实 意义 的 整体 (对 象 ) 。 

(4) 对 确认 的 主题 ( 子 系统 或 包 ) 的 测试 。 这 一 部 分 的 测试 是 比较 抽象 的 ,主要 目的 是 检 
查分 析 结 果 中 是 否 有 遗漏 的 服务 ,是 否 有 元 余 对 象 。 主 题 是 在 对 象 和 结构 的 基础 上 更 高 一 层 
的 抽象 ,是 为 了 提供 OOA 分 析 结 果 的 可 见 性 。 对 主题 的 测试 应 该 考虑 以 下 方面 : 

。 如 果 主 题 个 数 多 且 不 合理 ,就 要 对 有 较 密切 属性 和 服务 的 主题 进行 归并 。 

， 主 题 所 反映 的 一 组 对 象 和 结构 是 否 具有 相同 和 相近 的 属性 和 服务 。 

。 确认 的 主题 是 否 是 对 象 和 结构 更 高 层 的 抽象 ,是 否 便于 理解 OOA 结果 的 概貌 。 

。 主题 间 的 消息 联系 (抽象 ) 是 否 代表 了 主题 所 反映 的 对 象 和 结构 之 间 的 所 有 关联 。 


(5) 对 定义 的 属性 和 实例 关联 的 测试 。 对 象 实例 通常 不 会 直接 修改 属性 ,对 这 一 部 分 的 
测试 是 确保 对 象 的 属性 可 以 正常 关联 。 属 性 是 用 来 描述 对 象 或 结构 所 反映 的 实例 的 特性 ,而 
实例 关联 是 反映 实例 集合 间 的 映射 关系 。 对 属性 和 实例 关联 的 测试 可 以 考虑 以 下 方面 : 

。 定义 的 属性 是 否 对 相应 的 对 象 和 分 类 结构 的 每 个 现实 实例 都 适用 。 
定义 的 属性 在 现实 世界 是 否 与 这 种 实例 关系 密切 。 
定义 的 属性 在 问题 空间 是 否 与 这 种 实例 关系 密切 。 
定义 的 属性 是 否 能 够 不 依赖 于 其 他 属性 被 独立 理解 。 
定义 的 属性 在 分 类 结构 中 的 位 置 是 否 恰当 ,低层 对 象 的 共有 属性 是 否 在 上 层 对 象 属性 
体现 。 

在 问题 空间 中 每 个 对 象 的 属性 是 否定 义 完整 。 

定义 的 实例 关联 是 否 符合 现实 。 

在 问题 空间 中 实例 关联 是 否定 义 完整 ,特别 需要 注意 “一 对 多 ”和 “多 对 多 ”的 实例 
关联 。 

(6) 对 定义 的 服务 和 消息 关联 的 测试 。 测 试 系统 结构 的 消息 机 制 能 否 满 足 系统 运行 要 
求 ,系统 消息 的 发 送 方式 是 否 正 确 , 是 否 存 在 遗漏 的 消息 接收 者 或 者 消息 链 丢 失 。 定 义 的 服 
务 ,就 是 定义 的 每 一 种 对 象 和 结构 在 问题 空间 所 要 求 的 行为 。 由 于 问题 空间 中 实例 间 可 能 存 
在 通信 ,在 OOA 中 需要 相应 地 定义 消息 关联 。 对 定义 的 服务 和 消息 关联 的 测试 从 如 下 方面 
考虑 : 


对 象 和 结构 在 问题 空间 的 不 同 状态 是 否定 义 了 相应 的 服务 。 
对 象 或 结构 所 需要 的 服务 是 否 都 定义 了 相应 的 消息 关联 。 
定义 的 消息 关联 所 指引 的 服务 提供 是 否 正确 。 
沿 着 消息 关联 执行 的 线程 是 否 合理 ,是 否 符合 现实 过 程 。 
。 定义 的 服务 是 否 重复 ,是 否定 义 了 能 够 得 到 的 服务 。 
完成 了 对 面向 对 象 分 析 规约 的 静态 测试 之 后 ,需要 对 分 析 规 约 中 的 错误 或 缺陷 进行 修改 ， 
修改 后 根据 具体 情况 进行 再 测 或 审核 。 


8.4.2 面向 对 象 设计 的 测试 


1. 面向 对 象 的 设计 

面向 对 象 设计 的 重点 是 对 分 析 规 约 中 产生 的 对 象 进行 抽象 ,将 共同 的 特性 提取 出 来 并 细 
化 ; 根据 目标 系统 的 层次 结构 进行 系统 的 结构 设计 ,把 系统 分 解 成 多 个 子 系统 ; 设计 类 、 类 的 
接口 以 及 类 与 接口 之 间 的 关系 。 另 外 ,还 会 涉及 界面 设计 和 数据 库 设计 等 。 

OOD 阶段 会 产生 一 系列 的 中 间 结 果 , 这 些 工 作 产品 包括 : 

(1) 详细 类 定义 及 类 图 。 

(2) 消息 的 详细 定义 。 

(3) 类 的 状态 图 。 

(4) 类 或 子 系统 或 系统 的 活动 图 。 

(5) Use Case 的 合作 图 (协助 图 ) 或 顺序 图 。 

在 进行 这 一 部 分 测试 的 时 候 应 该 把 重点 放 在 对 架构 设计 的 验证 上 ,测试 一 般 采 用 静态 测 
试 中 的 评审 技术 。 


2. OOD 测试 的 内 容 

(1) 对 确认 的 类 的 测试 。 类 是 面向 对 象 开发 的 基本 单元 ,类 的 实现 是 否 与 类 的 描述 相 匹 
配 , 所 有 与 其 相关 的 活动 都 是 类 测试 需要 验证 的 内 容 。 一 般 来 说 ,如 果实 现 是 正确 的 ,类 的 每 
个 实例 都 会 是 正确 的 ,从 这 一 点 来 说 ,类 的 测试 与 传统 的 单元 测试 非常 类 似 。 不 同 之 处 在 于 ， 
类 的 测试 还 需要 对 类 的 定义 进行 验证 ,定义 的 类 必须 涵盖 所 有 确认 的 对 象 ,并 且 具 有 一 定 的 独 
立 性 ,不 能 过 分 依赖 其 他 的 类 。 测 试 确认 的 类 包括 如 下 方面 : 

。 是 否 涵 盖 了 OOA 中 所 有 确认 的 对 象 。 

。 是 否 能 体现 OOA 中 定义 的 属性 。 

。 是 否 能 实现 OOA 中 定义 的 服务 。 

。 是 否 对 应 着 一 个 含义 明确 的 数据 抽象 。 

。 是 否 尽 可 能 少 地 依赖 其 他 类 。 

。 类 中 的 方法 (在 C++ 中 即 类 的 成 员 函 数 ) 是 否 是 单 用 途 。 

(2) 对 构造 的 类 层次 结构 的 测试 。 类 的 层次 定义 与 系统 框架 确定 是 相对 应 的 ,类 测试 的 
重点 应 放 在 验证 类 的 特性 (如 继承 、 封 装 、 多 态 ) 和 结构 的 完整 性 上 。 为 了 能 够 充分 发 挥 面 向 对 
象 的 继承 共享 特性 ,OOD 的 类 层次 结构 通常 基于 OOA 中 产生 的 分 类 结构 的 原则 来 组 织 , 着 
重 体 现 父 类 和 子 类 间 的 一 般 性 和 特殊 性 。 测 试 需要 考虑 如 下 方面 : 

。 类 层次 结构 是 否 涵盖 了 所 有 定义 的 类 。 

。 是 否 能 体现 OOA 中 所 定义 的 实例 关联 。 

。 是 否 能 实现 OOA 中 所 定义 的 消息 关联 。 

。 子 类 是 否 具有 父 类 没有 的 新 特性 。 

。 子 类 间 的 共同 特性 是 否 完全 在 父 类 中 得 以 体现 。 

(3) 对 类 库 的 支持 的 测试 。 面 向 对 象 开发 方式 的 一 个 很 大 优点 就 是 重用 性 ,因此 ,类 库 的 
支持 在 设计 中 非常 重要 ,虽然 它 不 影响 系统 功能 的 实现 ,但 也 是 测试 需要 考虑 的 因素 之 一 。 类 
库 的 测试 最 主要 的 是 强调 可 复 用 类 必须 足够 独立 ,不 能 有 业务 逻辑 的 引用 和 实现 。 对 类 库 的 
支持 虽然 也 属于 类 层次 结构 的 组 织 问题 ,但 其 强调 的 重点 是 软件 开发 的 重用 ,因此 ,将 其 单独 
提出 来 测试 也 可 作为 对 高 质量 类 层次 结构 的 评估 。 考 虑 的 测试 点 如 下 : 

。 一 组 子 类 中 关于 某 种 含义 相同 或 基本 相同 的 操作 ,是 否 有 相同 的 接口 (包括 名 字 和 参 

数 表 ) 。 

。 类 中 方法 (在 C++ 中 即 类 的 成 员 函 数 ) 的 功能 是 否 较 单纯 ,相应 的 代码 行 是 否 较 少 。 

。 类 的 层次 结构 是 否 是 深度 大 ,宽度 小 。 

(4) 对 系统 架构 的 测试 。OOD 阶段 需要 将 定义 的 类 进行 预先 部 署 , 生 成 系统 架构 ,对 于 
系统 需求 中 的 约束 需要 在 这 一 阶段 进行 验证 。 例 如 , 某 个 开发 的 系统 需要 提供 对 销售 人 员 状 
态 进行 实时 监控 的 需求 ,初步 设计 构架 如 图 8-2 所 示 。 

由 于 无 线 网 络 带宽 受 限 ,对 该 系统 进行 预先 部 署 后 ,加 大 对 手持 终端 发 送 数据 量 和 频率 的 
模拟 , 即 可 发 现 应 用 程序 在 处 理 请 求 的 过 程 中 由 于 网 络 通信 中 存在 等 待 状况 导致 性 能 下 降 , 系 
统 需要 对 应 用 进行 重新 部 署 ,减轻 对 应 用 程序 服务 器 的 压力 。 

3. OOD 测试 的 方法 

OOD 测试 的 执行 是 一 个 交互 的 过 程 ,执行 测试 的 时 候 需要 建立 一 个 包括 前 提 条 件 的 消息 
序列 图 。 由 于 面向 对 象 开 发 对 接口 部 分 进行 了 封装 ,因此 需要 对 交互 模型 和 行为 模型 进行 区 
分 : 交互 模型 是 描述 系统 内 类 之 间 信 息 交互 的 机 制 ; 行为 模型 则 是 表述 类 内 部 结构 和 行为 。 
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图 8-2 系统 构架 的 例子 


行为 模型 作为 类 内 部 一 些 信息 的 载体 ,会 搭载 一 些 如 内 部 结构 、 依 赖 关系 、 性 能 要 求 等 方面 的 
信息 ,这 些 信息 对 测试 和 维护 面向 对 象 软件 来 说 非常 重要 ,在 OOD 测试 的 过 程 中 需要 将 这 些 
模型 的 测试 过 程 体现 在 测试 用 例 中 并 严格 执行 。OOD 测试 产生 的 测试 报告 需要 通过 具有 行 
业经 验 的 专家 审核 ,确保 执行 结果 具有 指导 意义 ,避免 造成 开发 成 本 不 必要 的 开销 。 


8.4.3 面向 对 象 编程 的 测试 


测试 在 软件 开发 过 程 中 具有 验证 和 确认 的 作用 ,由 于 面向 对 象 的 开发 模式 与 传统 方式 有 
很 大 不 同 ,OOP 的 测试 策略 与 传统 测试 也 有 很 大 不 同 , 主 要 体现 在 对 象 的 复杂 程度 上 。 就 像 
我 们 提 到 的 ,由 于 对 象 具有 继承 .封装 和 多 态 等 特性 ,在 测试 的 时 候 就 不 能 只 针对 所 实现 的 功 
能 进行 测试 。 因 为 对 象 的 功能 可 能 是 通过 继承 的 方式 得 到 的 ,是 可 以 重用 的 ,在 测试 功能 的 同 
时 需要 增加 对 继承 机 制 的 测试 ,如 对 象 是 否 满足 继承 的 条 件 ,继承 机 制 是 否 导致 系统 安全 性 的 
问题 都 是 需要 测试 的 。 面 向 对 象 编程 的 测试 可 采用 动态 测试 技术 或 静态 测试 技术 来 实现 。 

OOP 的 测试 分 为 : 

(1) 对 构造 和 析 构 方法 的 测试 。 需 要 验证 能 否 通过 类 创建 实例 ,以 及 创建 实例 后 ,通过 测 
试 该 实例 能 否 正常 注销 ,是 否 存在 内 存 泄露 。 

(2) 对 方法 的 测试 。 这 一 部 分 的 测试 是 整个 OOP 测试 中 工作 量 最 大 的 ,衡量 方法 测试 的 
指标 一 般 是 代码 的 覆盖 ,这 部 分 测试 是 以 逻辑 流程 被 全 部 覆盖 为 最 终 目的 的 。 目 前 有 很 多 公 
司 都 推出 了 自动 化 的 覆盖 率 测 试 工 具 ( 如 Logiscope、PureCoverage 等 ) 。 

(3) 对 类 的 测试 。 类 的 测试 主要 是 检查 被 调用 的 方法 对 其 他 方法 的 影响 ,比较 典型 的 例 
子 是 一 个 类 为 了 实现 某 个 功能 ,必须 保证 一 个 序列 的 方法 被 顺序 调用 ,如 果 只 用 独立 的 方法 调 
用 则 无 法 检查 系统 存在 的 问题 。 目 前 很 多 面向 对 象 的 建 模 工 具 都 提供 有 对 象 反 向 生成 模型 的 
功能 ,通过 这 种 方法 也 可 以 验证 程序 员 是 否 实现 了 设计 结果 。 

(4) 对 代码 进行 走 查 。 不 同 的 软件 生产 企业 \ 不 同 的 语言 ,不同 的 应 用 环境 ,对 代码 的 要 
求 都 是 不 同 的 ,企业 内 部 需要 建立 健全 的 走 查 机 制 对 开发 人 员 编 写 的 代码 进行 阶段 性 走 查 , 需 
要 走 查 的 内 容 见 第 2 章 , 这 里 再 针对 面向 对 象 编程 做 三 点 补充 : 

。 静态 分 析 内 容 : 验证 代码 覆盖 的 路 径 是 否 与 状态 图 和 流程 图 相 匹配 。 


*。 命名 约定 : 企业 内 部 或 行业 内 部 对 变量 命名 的 约定 ,如 对 象 类 型 变量 应 以 O 开头 等 。 

。 代码 约束 : 根据 项 目 要 求 不 同 ,软件 开发 过 程 中 对 代码 的 一 些 约束 是 不 同 的 。 例 如 ， 
在 一 些 单机 管理 软件 中 比较 强调 避免 使 用 对 象 类 型 的 参数 传递 数据 ,而 在 一 些 大 型 网 
络 应 用 程序 中 则 并 不 强调 这 一 点 。 


8.4.4 面向 对 象 的 单元 测试 


1. 单元 的 确定 

传统 单元 测试 的 对 象 是 模块 。 单 元 测试 应 对 模块 功能 、 模 块 内 所 有 重要 的 控制 路 径 设 计 
测试 用 例 , 以 便 发 现 模块 内 部 的 错误 ,主要 是 以 功能 性 测试 为 主 。 单 元 测试 可 采用 黑 盒 或 白 盒 
测试 技术 。 在 面向 对 象 软件 测试 中 ,可 以 把 类 或 方法 作为 单元 ,这 就 要 求 读者 根据 具体 情况 来 
确定 其 测试 单元 ,也 就 是 测试 的 最 小 粒度 。 下 面 对 分 别 以 方法 和 类 作为 单元 的 测试 进行 简单 
的 介绍 和 比较 。 

(1) 以 方法 为 单元 。 这 种 方法 可 以 将 面向 对 象 单元 测试 归结 为 传统 的 (过 程 的 ) 单 元 测 
试 。 方 法 几乎 等 价 于 过 程 ,所 以 可 以 使 用 所 有 传统 功能 性 测试 和 结构 性 测试 技术 。 过 程 代码 
的 单元 测试 需要 桩 和 驱动 器 测试 程序 ,用 来 运行 测试 用 例 并 记录 测试 结果 ,同样 把 方法 看 做 是 
面向 对 象 单 元 ,也 必须 开发 能 够 实例 化 的 桩 类 ,以 及 起 驱动 作用 的 “ 主 程序 "类 ,以 便 能 够 运行 
测试 用 例 和 分 析 测 试 结果 。 相 对 于 类 来 说 ,方法 一 般 很 简单 ,因此 以 方法 为 单元 的 单元 测试 就 
相对 容易 ,但 是 很 多 测试 的 负担 都 转移 到 了 后 续 的 测试 工作 中 ,也 就 是 类 内 集成 测试 工作 中 。 
这 也 意味 着 单元 测试 结束 后 ,要 进行 两 级 集成 测试 : 类 内 集成 测试 和 类 间 集 成 测试 。 

(2) 以 类 为 单元 。 以 类 为 单元 可 以 解决 类 内 集成 测试 问题 ,但 是 会 产生 其 他 问题 。 例 如 ， 
因为 抽象 类 不 能 被 实例 化 ,因此 不 能 被 测试 ,这 就 需要 关注 应 用 程序 中 各 类 之 间 的 相互 关系 
(如 继承 ) ,以 便 科学 地 确定 各 个 类 测试 的 先后 顺序 。 

面向 对 象 测试 的 层次 取决 于 单元 的 构成 ,如 果 把 单个 操作 或 方法 看 成 单元 , 则 有 操作 / 方 
法 测试 、 类 内 集成 测试 .类 间 集 成 测试 和 系统 测试 。 如 果 把 单个 类 看 成 单元 , 则 有 类 测试 、 类 间 
集成 测试 和 系统 测试 。 另 外 ,对 类 的 继承 关系 要 做 测试 。 在 实际 的 测试 中 更 多 的 将 类 作为 单 
元 进行 测试 , 下面 的 单元 测试 以 类 作为 单元 进行 分 析 。 

2. 类 测试 

1) 一 般 类 测试 

类 的 测试 包含 一 系列 的 校 验 活动 ,其 主要 目的 是 校 验 类 是 否 按 照 其 规格 说 明正 确实 现 了 。 
如 果实 现 是 正确 的 ,那么 所 有 类 的 实例 也 应 该 是 正确 的 。 通过 执行 测试 用 例 或 者 走 查 都 可 以 
有 效 地 对 类 的 代码 进行 测试 。 代 码 走 查 在 某 种 意义 上 来 说 可 以 代替 基于 执行 的 测试 ,但 它 有 
一 定 的 局 限 性 : 走 查 会 有 人 为 错误 的 影响 ,并 且 需 要 考虑 花 更 多 的 精力 在 回归 测试 上 。 因 此 ， 
对 类 的 测试 的 主要 方式 是 基于 执行 的 测试 。 

类 的 测试 一 般 是 由 开发 人 员 完 成 的 ,类 的 测试 代码 一 般 被 看 做 是 程序 的 一 部 分 。 这 样 可 
以 降低 测试 成 本 ,开发 人 员 在 对 类 进行 测试 的 同时 也 有 助 于 理解 类 的 定义 ,并 且 测试 驱动 也 可 
以 用 来 对 所 写 代 码 进行 调试 .有效 的 测试 类 组 件 同样 能 够 也 有 助 于 定位 错误 。 开 发 人 员 做 类 
测试 也 有 不 足 的 一 面 ,开发 人 员 对 设计 的 错误 理解 可 能 会 因为 得 不 到 监控 而 扩散 ,这 些 潜在 的 
错误 会 因为 不 能 及 时 发 现 而 造成 很 大 的 影响 。 因 此 ,在 时 间 允 许 的 情况 下 ,测试 人 员 也 需要 尽 
可 能 地 参与 类 的 测试 。 

在 进行 类 测试 时 ,数据 设计 主要 有 以 下 原则 : 


(1) 程序 是 否 能 处 理 输入 范围 以 外 的 数据 ; 
(2) 程序 是 否 有 未 考虑 到 的 处 理 结果 ; 


(3) 是 否 造成 系统 不 可 预知 的 错误 ,下 面 是 一 个 例子 代码 。 


public class Test{ 
public static void main(String[ ] args){ 
new Test( ); 
} 
Test(){ 
Test alias 1 = this; 
Test alias 2 = this; 
synchroniTested(alias1){ 
try{ 
alias 2.wait(); 
System. out. println("DONE WAITING"); 
} 
catch( Interrupt cException e){ 
System. out. println("INTERR UPDATED" ) ; 
} 
catch(Exception e){ 
System. out. println( "OTHER EXCEPTION" ); 
} 
finally{ 
System. out. println("FINALLY" ); 
} 
} 
System. out. println("ALL DONE"); 
} 
} 


在 代码 中 aliasl 与 alias2 指向 同一 对 象 ,在 线程 获取 了 Test 的 锁 后 虽然 释放 ,但 在 等 待 
池 中 没有 通知 Test 对 象 ,从 而 造成 系统 长 时 间 的 等 待 。 这 种 错误 在 多 线程 应 用 中 非常 常见 ， 


对 这 种 模型 的 应 用 应 该 重点 检查 系统 锁 的 机 制 。 


类 测试 可 以 采用 黑 盒 测试 和 白 盒 测试 的 方法 ,可 以 考虑 对 类 的 功能 覆盖 或 达到 某 种 要 求 
的 代码 覆盖 指标 。 由 于 每 个 类 均 具有 状态 图 ,因此 基于 状态 图 的 类 测试 是 一 种 很 有 效 的 方法 。 


下 面 重 点 分 析 。 


为 了 能 有 效 地 测试 所 有 的 类 ,根据 类 的 不 同行 为 分 成 4 种 类 型 ,并 可 以 用 ADT(Abstract 


Data Type) 图 和 状态 图 (State Transition Graph) 来 加 以 描述 。 


(1) 非 模 态 类 (Cnon-modale) 。 

非 模 态 类 不 受 它 的 状态 的 限制 ,也 与 方法 (Method) 
调用 的 顺序 无 关 。 

【 例 8-1】 臭氧 层 密度 的 采集 作为 类 。 

此 类 带 有 如 下 的 方法 : 

。 ml: 采集 当前 值 。 

。 m2: 采集 与 边界 值 的 差 值 。 

。 m3: 采集 最 近 24 小 时 的 最 高 值 。 

。 m4: 采集 本 月 的 最 高 值 。 

每 个 方法 在 任何 时 候 都 可 以 被 调用 ,也 不 受 状态 和 
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8-3 非 模 态 类 ADT 例 


调用 顺序 的 影响 ,如 图 8-3 所 示 。 

基本 测试 原则 : 

@ 所 有 的 方法 (所 有 的 节点 ) 覆 盖 : ml,m2,m3,m4。 

@ 所 有 可 能 的 方法 调用 顺序 (所 有 的 边 , 下 面 是 一 种 覆盖 所 有 边 的 情况 ) 覆 盖 

*。 ml,ml,m2,m2,m3,m3,m4,m4,ml; 

。 ml, m3, ml; 

。 m2, m4, m2; 

° ml, m4, m3, m2, ml。 

@ 所 有 的 路 径 覆 盖 。 

(2) 单 模 态 类 (uni-modale) 。 

单 模 态 类 与 它 的 状态 无 关 , 但 与 调用 方法 的 先后 顺序 有 关 。 

【 例 8-2】 一 个 模拟 三 人 (playerl 、player2 和 player3) 打 牌 的 系统 ,每 一 轮 都 是 严格 按照 
顺序 出 牌 , 如 图 8-4 所 示 。 


基本 测试 原则 : 和 
Q@ 所 有 的 方法 (所 有 的 节点 ) 覆 盖 : playerl，player2， /~、 
1Start，_ ~ (Player i 
hes a 


@ 所 有 可 能 的 方法 调用 顺序 (所 有 的 边 ) 覆 盖 : 1 
。 playerl, player2, player3,playerl; ha l 2 
。 playerl,playerl (异常 ); (eg) nin 
。 playerl,player3 (异常 )。 1 


Ed 


@ 所 有 的 路 径 蔬 盖 。 图 8-4 单 模 态 类 ADT 例 


(3) 准 模 态 类 (quasi-modale) 。 

准 模 态 类 与 它 的 状态 有 关 , 但 与 它 的 方法 的 调用 顺序 无 关 。 

【 例 8-3】 一 个 容量 无 限 大 的 队 作为 一 个 类 , 它 有 “ 空 " 和 *“ 非 空 " 两 个 状态 (empty 和 not 
empty) 并 带 有 remove 和 add 两 个 方法 ,对 方法 的 调用 顺序 没有 任何 限制 ,但 方法 的 调用 必须 
考虑 当前 的 状态 。 

Remove/ A 基本 测试 原则 & 
exception OO 所 有 的 方法 覆盖 有 empty, add, not empty，remove， 


Ry 
gs Ww 
(2 a S CO) (9 empty。 
(em) == 在 empty 状态 下 调用 方法 add, 状 态 由 empty 转换 成 
remove/item 


not empty ,然后 再 调用 方法 remove, 状 态 又 从 not empty 转 


2 换 成 empty( 见 图 8-5)。 
create Q@ 所 有 的 状态 (所 有 的 节点 ) 覆 盖 有 empty，add，not 
图 8-5 准 模 态 类 ADT 例 empty。 
所 有 的 状态 转换 (所 有 的 边 ): 


。 empty，remove，empty (异常 ); 

* not empty, remove, not empty 等 。 
@ 所 有 的 路 径 覆 盖 。 

(4) 模 态 类 (modale) 。 


模 态 类 与 它 的 状态 以 及 它 的 方法 的 调用 顺序 都 有 关 。 

【 例 8-4】 一 个 汽车 排挡 模拟 系统 (4 排挡 车 )。 

排挡 的 换 挡 有 明确 的 规定 , 即 换 挡 只 能 一 挡 一 挡 地 在 邻 挡 间 换 ,而 且 先 到 达 空 挡 , 然 后 再 
进入 实 挡 。 这 里 以 速度 作为 状态 ,在 换 挡 过 程 中 速度 起 着 很 重要 的 作用 ,例如 只 有 当 车 在 停止 
的 状态 下 (速度 为 0) 才 能 换 倒 挡 等 ,如 图 8-6 所 示 。 

基本 测试 原则 : | 


中 所 有 的 方法 覆盖 。 create 人) 

@ 所 有 的 状态 (所 有 的 节点 覆盖 。 ea 

@@ 所 有 的 状态 转换 (所 有 的 边 ) 覆 盖 。 RE ee ~ 

@ 所 有 的 路 径 驻 盖 。 人 evente (ED) 
机 neural N20 /ANN 


neutral 
一 个 类 的 属性 和 方法 越 多 , 它 的 状态 也 SS 2 
就 越 庞大 ,针对 一 个 类 的 完整 测试 ,覆盖 所 < 人 
有 状态 的 组 合 一 般 是 不 太 可 能 的 ,也 是 不 经 SS 
济 的 ,因为 它 的 测试 用 例 很 快 就 会 达到 天 文 
数字 。 图 8-6 模 态 类 ADT 例 


为 了 有 效 地 对 类 进行 测试 ,针对 以 上 4 
种 类 型 的 类 制定 了 如 下 一 般 的 覆盖 原则 : 

。 非 模 态 类 : 在 ADT 图 内 覆盖 所 有 的 节点 。 

。 单 模 态 类 : 在 ADT 图 内 覆盖 所 有 的 边 ( 包 括 所 有 的 节点 ) 。 

。 准 模 态 类 和 模 态 类 : 在 状态 转换 图 内 覆盖 所 有 的 状态 转换 (包括 所 有 的 节点 ) 。 

2) 特殊 类 测试 

下 面 主要 讨论 面向 对 象 的 两 个 特殊 类 的 测试 : 抽象 类 的 测试 和 泛 型 类 的 测试 。 

(1) 抽象 类 的 测试 。 

在 面向 对 象 的 概念 中 ,我 们 知道 所 有 的 对 象 都 是 通过 类 来 描绘 的 ,但 是 反 过 来 却 并 不 是 所 
有 的 类 都 是 用 来 描绘 对 象 的 ,如 果 一 个 类 中 没有 包含 足够 的 信息 来 描绘 一 个 具体 的 对 象 , 这 样 
的 类 就 是 抽象 类 。 抽 象 类 往往 用 来 表征 我 们 在 对 问题 领域 进行 分 析 、 设 计 中 得 出 的 抽象 概念 ， 
是 对 一 系列 看 上 去 不 同 , 但 是 本 质 上 相同 的 具体 概念 的 抽象 。 例 如 ,如 果 进 行 一 个 图 形 编 辑 软 
件 的 开发 ,就 会 发 现 问题 领域 存在 着 圆 、 三 角形 这 样 一 些 具体 概念 ,它们 是 不 同 的 ,但 是 它们 又 
都 属于 形状 这 样 一 个 概念 ,形状 这 个 概念 在 问题 领域 是 不 存在 的 , 它 就 是 一 个 抽象 概念 。 正 是 
因为 抽象 的 概念 在 问题 领域 没有 对 应 的 具体 概念 ,所 以 用 以 表征 抽象 概念 的 抽象 类 是 不 能 够 
实例 化 的 。 

在 面向 对 象 领域 ,抽象 类 主要 用 来 进行 类 型 隐藏 。 用 它 可 以 构造 出 一 个 固定 的 一 组 行为 
的 抽象 描述 ,但 是 这 组 行为 却 能 够 有 任意 个 可 能 的 具体 实现 方式 。 这 个 抽象 描述 就 是 抽象 类 ， 
而 这 一 组 任意 个 可 能 的 具体 实现 则 表现 为 所 有 可 能 的 派生 类 。 

由 于 一 个 抽象 类 没有 具体 的 实现 ,因此 也 就 没 法 具体 地 进行 测试 。 但 可 以 用 已 经 测试 过 
的 类 作为 它 的 具体 实现 ,或 创建 一 些 简单 .经 济 的 ,又 能 符合 规约 (specification) 的 桩 (stubs) 
来 具体 实现 。 这 样 , 抽 象 类 就 能 像 一 般 的 其 他 类 一 样 使 用 不 同 的 测试 方法 进行 测试 。 

(2) 泛 型 类 的 测试 。 

泛 型 类 封装 了 不 针对 任何 特定 数据 类 型 的 操作 。 泛 型 类 常用 于 容器 类 ,如 链表 、 哈 希 表 、 
栈 、. 队 列 、 树 等 。 这 些 类 中 的 操作 ,如 对 容器 添加 、 删 除 元 素 , 不 论 所 存储 的 数据 是 何 种 类 型 ,都 


执行 几乎 同样 的 操作 。 

泛 型 类 和 泛 型 方法 集 复 用 性 、 类 型 安全 和 高 效率 于 一 身 , 是 与 之 对 应 的 非 泛 型 的 类 和 方法 
所 不 及 的 。 

在 泛 型 中 有 个 重要 的 概念 就 是 泛 型 的 类 型 参数 (type parameters) ,类 型 参数 使 得 设计 类 和 方 
法 时 不 必 确 定 一 个 或 多 个 具体 参数 , 它 的 具体 参数 可 延迟 到 客户 代码 中 声明 、 实 现 。 这 意味 着 使 
用 泛 型 的 类 型 参数 T, 写 一 个 类 MyList<T> ,客户 代码 可 以 这 样 调用 : MyList<int> ,MyList 
去 string 盖 或 MyList 二 MyClass 之 。 这 避免 了 运行 时 类 型 转换 或 装 箱 操作 的 代价 和 风险 。 

在 泛 型 类 型 或 泛 型 方法 的 定义 中 ,类 型 参数 仅仅 只 是 一 个 占 位 符 Cplaceholder) ,一 般 用 一 个 
大 写字 母 来 表示 ,如 T。 在 客户 代码 声明 实例 化 该 类 型 的 变量 时 ,把 T 蔡 换 为 客户 代码 所 指定 
的 数据 类 型 。 泛 型 类 不 是 一 个 真正 的 类 型 ,而 更 像 是 一 个 类 型 的 蓝图 。 要 使 用 MyList<T>, 客 
户 代 码 必须 在 尖 括 号 内 指定 一 个 类 型 参数 来 声明 并 实例 化 一 个 已 构造 类 型 (constructed type)。 
这 个 特定 类 的 类 型 参数 可 以 是 编译 器 识别 的 任何 类 型 。 可 以 创建 任意 数量 的 已 构造 类 型 实 
例 , 每 个 使 用 不 同 的 类 型 参数 ,如 下 : 

MyList <MyClass> listl = new MyList < MyClass>(); 

MYList< float> list2 = new MyList <float >(); 

MyList < SomeStruct > list3 = new MyList < SomeStruct >(); 

在 这 些 MyList 二 T 二 的 实例 中 ,类 中 出 现 的 每 个 都 将 在 运行 的 时 候 被 类 型 参数 所 取 
代 。 依 靠 这 样 的 替换 , 仅 用 定义 类 的 代码 就 创建 了 三 个 独立 的 类 型 安全 且 高 效 的 对 象 。 

但 是 为 了 测试 这 些 泛 型 类 ,又 必须 在 对 象 实例 化 前 赋予 具体 的 参数 ,问题 是 采用 什么 样 的 
参数 ?对 于 泛 型 类 的 测试 ,一 般 建议 先 用 一 个 简单 的 ,经典 的 类 型 参数 ,以 便于 一 个 泛 型 类 能 
像 其 他 一 般 的 类 一 样 测试 。 

如 果 泛 型 类 带 有 多 个 类 型 参数 ,类 型 参数 间 还 会 相互 作用 和 相互 影响 ,一 个 参数 的 行为 可 
能 会 影响 到 另 一 个 参数 的 控制 流 和 数据 流 , 所 以 必须 尽 可 能 测试 各 种 类 型 参数 的 组 合 ,这 里 还 
要 考虑 参数 的 顺序 变换 以 及 用 多 个 有 相同 类 型 的 参数 构建 的 实例 。 

一 般 泛 型 类 的 测试 驱动 器 也 建议 采用 泛 型 类 ,这 样 , 同 一 个 测试 驱动 器 可 重复 测试 不 同 的 
参数 类 型 。 

穷 举 测试 一 个 可 参数 化 的 类 一 般 是 不 太 可 能 实现 的 ,因为 会 有 无 限 多 个 具有 不 同行 为 的 
参数 组 合 类 型 。 

3) 类 测试 的 建议 

Robert V. Binder (Testing Object-Oriented System-Models, patters, and Tools. Addison- 
Wesley, 2000) 提 出 了 一 个 经 典 的 针对 类 的 测试 的 建议 : 
执行 被 测 类 内 的 所 有 方法 ; 
检查 所 有 的 异常 情况 ,包括 引发 每 个 输出 的 异常 情况 和 对 异常 输入 的 处 理 情况 ; 
检查 被 测 类 是 否 能 到 达 所 有 可 到 达 的 状态 ; 

每 个 方法 都 要 在 对 象 的 每 个 状态 内 被 调用 (如 在 一 个 正确 的 状态 , 则 具有 正确 的 行为 。 
如 在 一 个 非 正确 的 状态 , 则 调用 应 该 被 拒绝 ); 

保证 每 个 状态 的 转换 是 正确 的 ; 

适度 的 加 载 测试 ,性 能 测试 和 错误 推测 或 怀疑 测试 (suspicion tests); 

用 划分 等 价 类 和 检查 边界 值 法 检查 所 有 的 输入 参数 和 输出 值 。 

由 于 类 的 继承 性 ,对 类 的 测试 不 能 仅仅 只 局 限于 单个 的 类 ,必须 同时 要 考虑 到 与 此 类 相关 


的 类 以 及 它们 的 父 类 。 如 果 被 测 类 是 一 个 子 类 , 则 可 以 部 分 利用 其 父 类 的 测试 用 例 。 

由 于 类 的 继承 性 的 特点 ,在 测试 父 类 导出 的 子 类 时 必须 注意 如 下 几 点 : 

。 做 扁平 化 ,即将 父 类 的 方法 和 属性 加 入 到 子 类 中 , 子 类 测试 完 后 删除 。 

。 对 于 所 有 重新 定义 的 方法 必须 设计 新 的 测试 用 例 并 执行 这 些 用 例 。 

。 对 于 所 有 导出 的 子 类 必须 重新 执行 父 类 的 所 有 测试 用 例 , 因 为 子 类 的 上 下 环境 不 同 ， 

对 这 些 不 同 环境 需要 分 别 设计 测试 用 例 进行 测试 。 

3. 单元 测试 自动 化 

单元 测试 的 测试 力度 通常 要 取决 于 软件 项 目 本 身 , 在 面向 对 象 的 软件 测试 中 ,由 于 单元 的 
概念 有 了 拓展 ,单元 测试 并 不 局 限于 针对 单个 类 或 方法 的 测试 ,测试 的 可 能 是 整个 对 象 ,也 可 
能 是 一 个 子 系统 。 这 样 对 于 测试 类 的 设计 也 就 相对 复杂 。 

由 于 单元 测试 工作 量 非常 大 ,而 且 测试 结果 不 像 代码 覆盖 的 标准 那样 易于 度量 ,一 些 组 织 
或 公司 纷纷 推出 各 自 的 单元 测试 工具 。 单 元 测试 工具 本 身 无 法 完全 代替 测试 人 员 的 角色 , 它 
的 好 处 在 于 规范 单元 测试 过 程 ,约束 测试 人 员 使 用 同样 的 单元 测试 方法 ,便于 收集 测试 结果 。 
单元 测试 工具 比较 有 代表 性 的 有 JUnit、Python 和 Cppunit 等 。 

虽然 单元 自动 化 测试 工具 给 我 们 带 来 了 很 大 的 便利 ,但 是 执行 单元 测试 很 重要 的 一 个 前 
提 仍 然 是 测试 人 员 必 须 对 软件 足够 熟悉 ,了 解 软 件 的 相关 业务 背景 知识 ,不 能 只 是 为 了 测试 软 
件 的 流程 而 测试 。 


8.4.5 面向 对 象 的 集成 测试 


集成 测试 的 主要 目的 是 检查 两 个 或 两 个 以 上 的 模块 或 对 象 接口 的 数据 正确 性 。 传 统 的 集 
成 测试 是 通过 各 种 集成 策略 集成 各 功能 模块 进行 测试 ,一 般 可 以 在 部 分 程序 编译 完成 的 情况 
下 进行 。 而 对 于 面向 对 象 程序 ,相互 调用 的 功能 是 散布 在 程序 的 不 同类 中 ,类 通过 消息 相互 作 
用 申请 和 提供 服务 。 类 的 行为 与 它 的 状态 密切 相关 ,状态 不 仅仅 是 体现 在 类 数据 成 员 的 值 ,也 
许 还 包括 其 他 类 中 的 状态 信息 。 由 此 可 见 , 类 的 相互 依赖 极其 紧密 ,根本 无 法 在 编译 不 完全 的 
程序 上 对 类 进行 测试 。 所 以 ,面向 对 象 的 集成 测试 通常 需要 在 整个 程序 编译 完成 后 进行 。 此 
外 ,面向 对 象 程序 具有 动态 特性 ,程序 的 控制 流 往往 无 法 确定 ,因此 一 般 也 只 能 对 整个 编译 后 
的 程序 做 基于 黑 盒 子 的 集成 测试 。 

在 集成 测试 中 ,一 个 关键 的 问题 是 怎样 进行 集成 ? 好 的 集成 方法 可 以 避免 写 大 量 的 测试 
驱动 器 和 桩 ,节约 各 种 资源 。 本 节 不 涉及 讨论 类 内 方法 的 集成 。 

面向 对 象 的 集成 在 不 同 的 阶段 可 分 成 三 个 不 同 的 集成 类 型 : 

。 类 的 集成 : 将 有 关 的 类 集成 为 一 个 子 系统 或 组 件 。 

。 子 系统 或 组 件 的 集成 : 将 子 系统 集成 为 一 个 应 用 层 。 

。 层 的 集成 : 不 同 的 层 , 可 以 是 描述 层 . 工 作 层 、 存 取 层 或 客户 器 /服务 器 (Client/Server) 

层 的 集成 。 

图 8-7 所 示 为 集成 示意 图 。 

在 面向 对 象 的 集成 测试 过 程 中 要 考虑 到 面向 对 象 系统 是 由 事件 操纵 的 特点 ,在 集成 测试 
时 一 般 推 荐 考虑 如 下 5 个 层次 : 

。 类 的 测试 (method testing)， 

。 消息 序列 (message sequences); 

。 事件 序列 (event sequences); 
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图 8-7 集成 示意 图 


。 线程 测试 (thread testing); 

。 交互 测试 (thread interaction testing)。 

在 线程 测试 中 主要 是 应 用 了 方法 /消息 路 径 (Method-Message-Paths, MM-Paths)。 所 谓 
的 方法 /消息 路 径 就 是 一 个 运行 的 方法 (Method) 通 过 消息 (Message) 的 传递 调用 另 一 个 方法 ， 
最 后 到 不 能 再 产生 消息 的 方法 为 止 , 即 处 于 一 种 相对 静止 状态 。 在 一 个 调用 中 可 能 会 存在 多 
个 方法 /消息 路 径 ,在 线程 测试 中 就 是 要 覆盖 这 些 方法 /消息 路 径 。 

事件 控制 的 测试 过 程 中 引入 了 原子 系统 功能 (Atomic System Function, ASF) 的 概念 。 原 
子 系统 功能 是 由 外 部 的 事件 (input port event) 激 活 系 统 , 导 致 系统 有 所 反应 (Coutput port 
event) ,这 样 的 一 个 过 程 称 为 原子 系统 功能 。 在 面向 对 象 的 集成 测试 中 还 应 覆盖 子 系统 内 的 
原子 系统 功能 。 

图 8-8 所 示 为 MM-Paths/ ASF 示意 图 。 

面向 对 象 的 集成 测试 能 够 检测 出 相对 独立 的 单元 测试 无 法 检测 出 的 那些 类 相互 作用 时 才 
会 产生 的 错误 或 缺陷 。 基 于 单元 测试 对 成 员 函 数 行为 正确 性 的 保证 ,集成 测试 只 关注 于 系统 
的 结构 和 内 部 的 相互 作用 。 

UML 中 的 协作 图 是 基于 时 间 先 后 顺序 表达 对 象 的 交互 ,而 序列 图 则 是 通过 对 象 的 交互 
顺序 来 表达 同样 事件 或 操作 ,这 些 也 是 集成 测试 的 很 好 依据 。 

集成 测试 所 要 达到 的 覆盖 指标 可 以 是 

。 所 有 类 的 所 有 方法 至 少 覆 盖 一 次 ; 


input port event output port event 
A 


SA 
output port event 


-= 一 消息 
co MM-Path 
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8-8 ”MM-Paths /ASF 示意 图 


。 协助 图 (合作 图 ?或 序列 图 中 的 所 有 消息 至 少 覆 盖 一 次 ; 

。 依据 类 间 传 递 的 消息 达到 对 所 有 执行 线程 至 少 覆 盖 一 次 ; 

。 子 系统 内 所 有 ASF 至 少 覆 盖 一 次 ; 

。 所 有 类 的 所 有 状态 至 少 覆 盖 一 次 ; 

。 对 象 之 间 的 调用 关系 图 中 的 边 ( 消 息 ) 或 节点 (方法 ) 至 少 覆 盖 一 次 。 

同时 也 可 以 考虑 使 用 现 有 的 一 些 测试 工具 来 得 到 集成 测试 接口 (消息 ) 的 覆盖 率 。 

在 进行 具体 的 分 析 和 用 例 设 计时 ,可 参考 下 列 步骤 : 

(1) 先 选 定 检测 的 类 ,参考 面向 对 象 设 计 分 析 结 果 及 协助 图 ,顺序 图 .状态 图 等 ,仔细 分 析 
出 类 的 状态 和 相应 的 行为 ,类 或 成 员 函 数 间 传 递 的 消息 ,输入 或 输出 的 界定 等 。 

(2) 确定 覆盖 指标 。 

(3) 利用 类 图 (E-R 图 ) 确 定 待 测 类 的 所 有 关联 。 

(4) 根据 程序 中 类 的 对 象 构造 测试 用 例 ,确认 使 用 什么 输入 激发 类 的 状态 、 使 用 类 的 服务 
和 期 望 产生 什么 行为 等 。 

值得 注意 ,设计 测试 用 例 时 ,不 但 要 设计 类 功能 满足 的 输入 ,还 应 该 有 意识 地 设计 一 些 异 
常 输入 的 例子 ,类 是 否 有 不 合法 的 行为 产生 ,如 发 送 与 类 状态 不 相 适 应 的 消息 ,要 求 有 不 相 适 
应 的 服务 等 。 

所 设计 的 测试 用 例 必须 进行 评审 。 


8.4.6 面向 对 象 的 系统 测试 


经 过 单元 测试 和 集成 测试 后 ,系统 仅 能 保证 软件 的 功能 得 以 实现 。 但 不 能 确认 在 实际 运 
行 时 , 它 是 否 真正 满足 了 用 户 的 需要 ,在 实际 使 用 条 件 下 是 否 存 在 大 量 被 诱发 产生 的 错误 或 缺 
陷 。 为 此 ,对 完成 开发 的 软件 必须 经 过 规范 的 系统 测试 。 换 个 角度 来 说 ,开发 完成 的 软件 仅仅 
是 实际 投入 使 用 系统 的 一 个 组 成 部 分 ,需要 测试 它 与 系统 其 他 部 分 配套 运行 的 表现 ,以 保证 在 
系统 各 部 分 协调 工作 的 环境 下 也 能 正常 工作 。 在 系统 测试 中 是 从 用 户 的 角度 来 对 整个 系统 进 
行 测试 。 

系统 测试 应 该 尽量 搭建 与 用 户 实际 使 用 环境 相同 的 测试 平台 ,应 该 保证 被 测 系 统 的 完整 


性 ,对 临时 没有 的 系统 设备 部 件 , 也 应 有 相应 的 模拟 手段 。 系 统 测试 时 ,应 该 参考 面向 对 象 分 
析 (OOA) 的 分 析 结 果 , 对 应 描述 的 对 象 . 属 性 和 各 种 服务 ,检测 软件 是 否 能 够 完全 “再 现 ” 问 题 
空间 。 系 统 测试 不 仅 是 检测 软件 的 整体 行为 表现 ,从 另 一 个 侧面 来 看 ,也 是 对 软件 开发 设计 的 
再 确认 。 它 体现 的 具体 测试 内 容 在 其 他 章节 中 也 有 详细 分 析 ,这 里 简单 描述 : 

。 功能 测试 : 测试 是 否 满足 开发 要 求 ,是 否 能 够 提供 设计 所 描述 的 功能 ,是 否 用 户 的 需 
求 都 得 到 满足 。 功 能 测试 是 系统 测试 最 常用 和 必须 的 测试 ,通常 还 会 以 正式 的 软件 需 
求 说 明 书 为 测试 标准 。 
强度 (压力 ) 测 试 : 测试 系统 的 实际 最 大 承受 能 力 , 即 软件 在 一 些 超 负荷 的 情况 ,功能 
实现 情况 。 如 要 求 软件 对 某 一 行为 的 大 量 重复 、 输 入 大 量 的 数据 或 大 数值 数据 、 对 数 
据 库 大 量 复杂 的 查询 等 。 
性 能 测试 : 测试 软件 的 运行 性 能 。 这 种 测试 常常 与 强度 (压力 ) 测 试 结合 进行 ,需要 事 
先 对 被 测 软 件 提出 性 能 指标 ,如 传输 连接 的 最 长 时 限 、 传 输 的 错误 率 、 计 算 的 精度 、 记 
录 的 精度 、 响 应 的 时 限 和 恢复 时 限 等 。 
安全 测试 : 验证 安装 在 系统 内 的 保护 设施 确实 能 够 对 系统 进行 保护 ,使 之 不 受 各 种 情 
况 的 干扰 。 安 全 测试 时 需要 设计 一 些 测 试用 例 试 图 突破 系统 的 安全 保密 措施 ,检验 系 
统 是 否 有 安全 保密 的 漏洞 。 
恢复 测试 : 采用 人 工 的 干扰 使 软件 出 错 , 中 断 使 用 ,检测 系统 的 恢复 能 力 , 特 别 是 通信 
系统 。 恢 复 测试 时 ,应 该 参考 性 能 测试 的 相关 测试 指标 。 
可 用 性 测试 : 测试 用 户 对 系统 的 使 用 是 否 满意 ,具体 体现 为 操作 是 否 方便 ,用 户 界面 
安装 / 印 载 测试 (install/uninstall test) 。 
用 户 界面 测试 : 在 确保 用 户 界面 能 够 通过 测试 对 象 或 控件 得 到 相应 访问 的 情况 下 , 测 
试用 户 界面 的 风格 是 否 满足 用 户 要 求 ,例如 界面 是 否 美观 .界面 是 否 直 观 、 操 作 是 否 友 
好 .是否 人 性 化 、. 易 操作 性 等 。 
可 维护 性 测试 : 可 维护 性 是 指 系统 软 、 硬 件 实施 和 维护 方面 的 方便 程度 ,目的 是 降低 
维护 对 系统 正常 运行 带 来 的 影响 ,例如 对 支持 远程 维护 的 系统 的 功能 或 工具 进行 


测试 。 

。 系统 可 靠 性 、 稳 定性 测试 : 在 具有 一 定 负荷 并 长 期 使 用 的 环境 下 ,系统 的 可 靠 性 、 稳 
定性 。 

。 系统 兼容 性 测试 : 即 系统 的 软件 与 各 种 硬件 设备 兼容 性 ,与 操作 系统 兼容 性 、 与 支撑 
软件 的 兼容 性 。 

。 系统 组 网 测试 : 在 组 网 环境 下 ,系统 软件 对 接 入 设备 的 支持 情况 ,包括 功能 实现 及 群 
集 性 能 。 


系统 安装 升级 测试 : 安装 测试 的 目的 是 确保 该 软件 在 正常 和 异常 的 情况 下 均 能 正常 
安装 或 有 详细 的 安装 错误 提示 。 例 如 正常 情况 下 ,用 户 能 选择 默认 安装 、 升 级 安装 、 完 
整 安装 或 自 定义 安装 等 。 异 常情 况 可 能 包括 磁盘 空间 不 足 、 缺 少 目录 创建 权限 等 。 另 
外 ,需要 确保 软件 安装 后 能 正常 运行 ,同时 对 安装 手册 、 安 装 脚本 等 也 需要 关注 。 

。 协议 一 致 性 测试 等 。 

与 传统 系统 测试 不 同 的 是 ,面向 对 象 的 系统 测试 还 需要 验证 OOA 分 析 的 结果 ,也 需要 对 
软件 的 架构 设计 部 分 进行 验证 ,确保 软件 可 以 顺利 实现 用 户 需 求 。 


在 面向 对 象 的 系统 测试 中 通常 是 使 用 基于 需求 的 覆盖 策略 对 测试 结果 进行 度量 。 基 于 需 
求 的 测试 覆盖 在 测试 生命 周期 中 需要 进行 多 次 评测 ,并 在 测试 生命 周期 的 里 程 碑 点 提供 测试 
覆盖 的 标识 (如 已 计划 的 已 实施 的 ,已 执行 的 和 成 功 的 测试 覆盖 ) 。 

测试 覆盖 通过 以 下 公式 计算 : 

测试 覆盖 = 二 TGCp,i,z,s)/RIT 

其 中 : 

是 用 测试 过 程 或 测试 用 例 表 示 的 测试 数 ( 已 计划 的 ,已 实施 的 或 成 功 的 ,基于 用 例 表 示 
的 就 是 测试 用 例 的 数量 ) 。 

RfT 是 测试 需求 (Requirement for Test) 的 总 数 ,对 于 测试 用 例 而 言 ,测试 用 例 应 该 覆盖 
所 有 需求 。 

在 制订 测试 计划 活动 中 ,需要 计算 测试 覆盖 以 确定 计划 中 的 测试 覆盖 指标 ,其 计算 方法 
如 下 : 

测试 覆盖 (已 计划 的 ) 二 Tp/RIT 

其 中 : 

Tp 是 用 测试 过 程 或 测试 用 例 表 示 的 已 计划 测试 数 。 

在 实施 测试 活动 中 ,由 于 测试 过 程 正在 实施 中 (按照 测试 脚本 ) ,在 计算 测试 覆盖 时 使 用 以 


测试 覆盖 (已 执行 的 ) 一 Ti/RIT 
其 中 : 
Ti 是 用 测试 过 程 或 测试 用 例 表 示 的 已 执行 的 测试 数 。 
在 执行 测试 活动 中 ,使 用 两 个 测试 覆盖 评测 ,一 个 是 确定 通过 执行 测试 获得 的 测试 履 盖 ， 
另 一 个 确定 成 功 的 测试 柳 盖 ( 即 执 行 时 未 出 现 失 败 的 测试 ,如 没有 出 现 缺陷 或 意外 结果 的 
测试 。 
这 些 覆 盖 评 测 通过 以 下 公式 计算 : 
测试 覆盖 (已 执行 的 ) 王 Tz/RIT 
其 中 : 
Tz 是 用 测试 过 程 或 测试 用 例 表 示 的 已 执行 的 测试 数 。 
成 功 的 测试 覆盖 (已 执行 的 ) 王 Ts/RfT 
Ts 是 用 完全 成 功 、 没 有 缺陷 的 测试 过 程 或 测试 用 例 表示 的 已 执行 测试 数 。 
如 将 以 上 比率 转换 为 百分数 , 则 以 下 基于 需求 的 测试 覆盖 的 描述 成 立 : 
z% 的 测试 用 例 ( 上 述 公式 中 的 TCpi,zss)) 已 经 覆盖 ,成 功率 为 y%。 


练习 


1. 简 述 面向 对 象 单元 测试 的 各 种 覆盖 方法 和 指标 ,并 分 析 。 

2. 面向 对 象 的 集成 测试 的 依据 是 什么 ? 

3. 如 果 一 个 子 类 继承 了 其 父 类 的 方法 ,如 何在 子 类 中 对 这 个 方法 进行 测试 ? 
4. 简 述 面向 对 象 的 分 析 和 设计 的 测试 。 

5. 分 析 面 向 对 象 系统 测试 的 覆盖 策略 。 
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CHAPTER 9 


第 9 章 
专用 应 用 系统 测试 


9.1 GUI 测试 


9.1.1 GUI 测试 概述 


GUICGraphical User Interface, 图 形 用 户 界面 ) 有 时 也 称 为 Wimp 
(Window Icon .Menu、Pointing Device, 窗口 .图 标 、 菜 单 、 指 点 设备 ) 。 
图 形 用 户 界面 是 当前 用 户 界面 的 主流 ,广泛 应 用 于 各 行 各 业 。 比 较 成 熟 
的 商品 化 系统 有 Apple 的 Macintosh、IBM 的 PM (Presentation 
Manager) 、Microsoft 的 Windows 和 运行 于 UNIX 环境 的 X-Window 、 
OpenLook 和 OSF/Motif 等 。 当 前 各 类 图 形 用 户 界面 的 共同 特点 是 以 
窗口 管理 系统 为 核心 ,使 用 键盘 和 鼠标 作为 输入 设备 。 窗 口 管 理 系统 除 
基于 可 重 释 多 窗口 管理 技术 外 ,广泛 采用 的 另 一 核心 技术 是 事件 驱动 
(Event-Driven) 技 术 。 图 形 用 户 界 面 和 人 机 交互 过 程 极 大 地 依赖 视觉 
和 手动 控制 的 参与 ,因此 具有 很 强 的 直接 操作 特点 。 

由 于 目前 绝 大 部 分 应 用 软件 都 是 基于 GUI 进行 设计 开发 ,因此 在 
产品 的 测试 活动 中 ,尤其 是 功能 测试 活动 中 ,GUI 测试 占 到 非常 大 的 比 
率 ,GUI 测 试 质量 和 效率 是 整个 产品 质量 提升 和 成 本 降低 的 关键 。 

GUI 的 软件 测试 有 其 特殊 性 ,一 般 不 存在 单元 级 别 的 测试 。 可 以 
通过 软件 测试 的 自动 化 工具 进行 以 达到 功能 的 覆盖 或 其 他 覆盖 ,也 可 以 
通过 分 析 不 同 层次 的 GUI, 理解 控件 的 事件 以 达到 某 种 事件 组 合 的 覆 
盖 , 并 进一步 理解 事件 驱动 的 事件 组 合 的 GUI 测试 方法 。 


9.1.2 GUI 测试 原则 


在 当今 的 软件 领域 ,几乎 已 经 找 不 到 没有 界面 的 应 用 软件 了 ,而 界 
面 的 设计 和 测试 发 展 相 对 比较 慢 ,主要 采用 分 层次 的 事件 驱动 的 方法 ， 
尤其 由 于 网 页 制作 的 兴起 ,GUI 测试 受到 业界 关注 。 此 外 ,设计 优良 的 
界面 要 有 艺术 美 , 需 要 具有 美学 基础 。 国 内 软件 企业 对 此 也 越 来 越 重 
视 , 很 多 软件 企业 聘 有 专门 的 美工 人 员 进 行 界面 的 原型 设计 。 

界面 是 软件 与 用 户 交互 的 最 直接 层面 ,界面 的 好 坏 决定 用 户 对 软件 
的 第 一 印象 。 而 设计 优良 的 界面 能 够 引导 用 户 自己 完成 相应 的 操作 ,起 


到 向 导 的 作用 。 同 时 界面 如 同人 的 面孔 ,具有 吸引 用 户 的 直接 优势 。 

设计 合理 的 界面 能 给 用 户 带 来 轻松 愉悦 的 感受 和 成 功 的 感觉 ,相反 ,由 于 界面 设计 的 失 
败 , 让 用 户 有 挫败 感 , 再 实用 强大 的 功能 都 可 能 在 用 户 的 旦 惧 与 放弃 中 付 诸 东 流 。 目 前 流行 的 
界面 风格 有 三 种 方式 : 多 窗 体 、 单 窗 体 以 及 资源 管理 器 风格 ,无 论 哪 种 风格 ,以 下 原则 应 该 得 
到 重视 或 参考 ,这 些 原则 是 GUI 测试 所 关注 的 重点 。 

1. 易 用 性 原则 

按钮 名 称 易 懂 , 用 词 准 确 , 屏 项 模棱两可 的 字眼 ,要 易于 与 同一 界面 上 的 其 他 按钮 区 分 ,能 
见 文 知 意 最 好 。 理 想 的 情况 是 用 户 不 用 查阅 帮助 就 能 知道 该 界面 的 功能 并 进行 相关 的 正确 操 
作 。 易 用 性 细则 : 

。 完成 相同 或 相近 功能 的 按钮 用 Frame 框 起 来 ,常用 按钮 要 支持 快捷 方式 。 

。 完成 同一 功能 或 任务 的 元 素 集中 放置 ,减少 鼠标 移动 的 距离 。 

。 按 功 能 将 界面 划分 局 域 块 , 用 Frame 框 起 来 ,并 要 有 功能 说 明 或 标题 。 

。 界面 要 支持 键盘 自动 浏览 按钮 功能 , 即 按 Tab 键 的 自动 切换 功能 。 

。 界面 上 首先 应 输入 的 信息 和 重要 信息 的 控件 在 Tab 顺序 中 应 当 靠 前 ,位 置 也 应 放 在 窗 

口上 较 醒 目的 位 置 。 

。 同一 界面 上 的 控件 数 最 好 不 要 超过 10 个 ,多 于 10 个 时 可 以 考虑 使 用 分 页 界面 显示 。 

。 分 页 界面 要 支持 在 页 面 间 的 快捷 切换 ,常用 Ctrl 十 Tab 组 合 键 。 

。 默认 按钮 要 支持 Enter 操作 , 即 按 Enter 键 后 自动 执行 默认 按钮 对 应 操作 。 

。 可 输入 控件 检测 到 非法 输入 后 应 给 出 说 明 信 息 并 能 自动 获得 焦点 。 

。 Tab 键 的 顺序 与 控件 排列 顺序 要 一 致 ,目前 流行 总 体 从 上 到 下 ,同时 行 间 从 左 到 右 的 

让 式 。 

。 复 选 框 和 选项 框 按 选择 几率 的 高 低 先后 排列 。 

。 复 选 框 和 选项 框 要 有 默认 选项 ,并 支持 Tab 选择 。 

。 选项 数 相 同时 多 用 选项 框 而 不 用 下 拉 列 表 框 。 
界面 空间 较 小 时 使 用 下 拉 框 而 不 用 选项 框 。 
。 选项 数 较 少时 使 用 选项 框 ,相反 使 用 下 拉 列 表 框 。 
专业 性 强 的 软件 要 使 用 相关 的 专业 术语 ,通用 性 界面 则 提倡 使 用 通用 性 词语 。 
对 于 界面 输入 重复 性 高 的 情况 ,该 界面 应 全 面 支持 键盘 操作 , 即 在 不 使 用 鼠标 的 情况 
下 采用 键盘 进行 操作 。 

2. 规范 性 原则 

通常 界面 设计 都 按 Windows 界面 的 规范 来 设计 , 即 包含 “菜单 条 、 工 具 栏 . 工 具 箱 、 状 态 
栏 滚动 条 .右键 快捷 菜单 ”的 标准 格式 。 一 般 来 说 ,界面 遵循 规范 化 的 程度 越 高 , 则 易 用 性 相 
应 的 就 越 好 。 小 型 软件 一 般 不 提供 工具 箱 。 规 范 性 细则 : 

。 常用 菜单 要 有 命令 快捷 方式 。 

。 完成 相同 或 相近 功能 的 菜单 用 横 线 隔 开 放 在 同一 位 置 。 
菜单 前 的 图 标 能 直观 地 代表 要 完成 的 操作 。 
菜单 深度 一 般 要 求 最 多 控制 在 三 层 以 内 。 
工具 栏 要 求 可 以 根据 用 户 的 要 求 自己 选择 定制 。 
相同 或 相近 功能 的 工具 栏 放 在 一 起 。 
工具 栏 中 的 每 一 个 按钮 要 有 及 时 提示 信息 。 


。 一 条 工具 栏 的 长 度 最 长 不 能 超出 屏幕 宽度 。 
*。 工具 栏 的 图 标 能 直观 地 代表 要 完成 的 操作 。 
。 系统 常用 的 工具 栏 设置 默认 放置 位 置 。 
。 工具 栏 太 多 时 可 以 考虑 使 用 工具 箱 。 
。 工具 箱 要 具有 可 增 减 性 ,由 用 户 自己 根据 需求 定制 。 
工具 箱 的 默认 总 宽度 不 要 超过 屏幕 宽度 的 1/5。 
。 状态 条 要 能 显示 用 户 切实 需要 的 信息 ,常用 的 有 目前 的 操作 、 系 统 状态 .用 户 位 置 、 二 
户 信息 、 提 示 信 息 、 错 误 信息 、 使 用 单位 信息 及 软件 开发 商 信息 等 ,如 果 某 一 操作 需要 
的 时 间 较 长 ,还 应 该 显示 进度 条 和 进程 提示 。 
滚动 条 的 长 度 要 能 根据 显示 信息 的 长 度 或 宽度 及 时 变换 ,以 利于 用 户 了 解 显示 信息 的 
位 置 和 百分比 。 
状态 条 的 高 度 以 放置 五 号 字 为 宜 ,滚动 条 的 宽度 比 状态 条 的 略 罕 。 
。 菜单 和 工具 条 要 有 清楚 的 界限 。 菜 单 要 求 凸 出 显示 ,这 样 在 移 走 工具 条 时 仍 有 立 
体感 。 
菜单 和 状态 条 中 通常 使 用 5 号 字体 。 工 具 条 一 般 比 菜 单 要 宽 , 但 不 要 宽 得 太 多 ,和 否则 
看 起 来 很 不 协调 。 

* 右键 快捷 菜单 采用 与 菜单 相同 的 准则 。 

3. 帮助 原则 

系统 应 该 提供 详尽 而 可 靠 的 帮助 文档 ,在 用 户 使 用 产生 迷惑 时 可 以 自己 寻求 解决 方法 。 
帮助 设置 细则 : 

。 帮助 文档 中 的 性 能 介绍 与 说 明 要 与 系统 性 能 配套 一 致 。 

。 打包 新 系统 时 ,对 做 了 修改 的 地 方 在 帮助 文档 中 要 做 相应 的 修改 ,做 到 版 本 统一 。 

。 操作 时 要 提供 及 时 调用 系统 帮助 的 功能 。 常 用 Fl 键 。 

。 在 界面 上 调用 帮助 时 应 该 能 够 及 时 定位 到 与 该 操作 相对 的 帮助 位 置 。 也 就 是 说 帮助 

要 有 即时 针对 性 。 

。 最 好 提供 目前 流行 的 联机 帮助 格式 或 HTML 帮助 格式 。 

。 用 户 可 以 用 关键 词 在 帮助 索引 中 搜索 所 要 的 帮助 ,当然 也 应 该 提供 帮助 主题 词 。 

。 如 果 没 有 提供 书面 的 帮助 文档 的 话 , 最 好 有 打印 帮助 的 功能 。 

。 在 帮助 中 应 该 提供 技术 支持 方式 ,一 旦 用 户 难以 自己 解决 ,可 以 方便 地 寻求 新 的 帮助 

方式 。 

4. 合理 性 原则 

屏幕 对 角 线 相交 的 位 置 是 用 户 直 视 的 地 方 , 正 上 方 1/4 处 为 易 吸引 用 户 注意 力 的 位 置 ,在 
放置 窗 体 时 要 注意 利用 这 两 个 位 置 。 合 理性 细则 : 

。 父 窗 体 或 主 窗 体 的 中 心 位 置 应 该 在 对 角 线 焦点 附近 。 
子 窗 体位 置 应 该 在 主 窗 体 的 左上 角 或 正中 。 
。 多 个 子 窗 体 弹出 时 应 该 依次 向 右 下 方 偏 移 , 以 显示 出 窗 体 标题 为 宜 。 
。 重要 的 命令 按钮 与 使 用 较 频繁 的 按钮 要 放 在 界面 上 注目 的 位 置 。 
错误 使 用 容易 引起 界面 退出 或 关闭 的 按钮 不 应 该 放 在 易 点 位 置 。 横 排 开 头 或 最 后 与 
坚 排 最 后 为 易 点 位 置 。 
与 正在 进行 的 操作 无 关 的 按钮 应 该 加 以 屏蔽 。 


对 可 能 造成 数据 无 法 恢复 的 操作 必须 提供 确认 信息 ,给 用 户 放弃 选择 的 机 会 。 
非法 的 输入 或 操作 应 有 足够 的 提示 说 明 。 
。 对 运行 过 程 中 出 现 问 题 而 引起 错误 的 地 方 要 有 提示 ,让 用 户 明 白 错误 出 处 ,避免 形成 
无 限期 的 等 待 。 
提示 、 警 告 或 错误 说 明 应 该 清楚 、 明 了 、 恰 当 , 并 且 应 避免 英文 提示 的 出 现 (英文 系统 除 
外 )。 

5. 美观 与 协调 性 原则 

界面 应 该 大 小 适合 美学 观点 .感觉 协调 舒适 ,能 在 有 效 的 范围 内 吸引 用 户 的 注意 力 。 美 观 
与 协调 性 细则 : 

。 长 宽 接 近 黄 金 点 比例 ,切忌 长 宽 比例 失调 ,或 宽度 超过 长 度 。 

。 布局 要 合理 ,不 宜 过 于 密集 ,也 不 能 过 于 空旷 ,合理 地 利用 空间 。 

。 按钮 大 小 基本 相近 , 鼠 用 太 长 的 名 称 , 免 得 占用 过 多 的 界面 位 置 。 

。 按钮 的 大 小 要 与 界面 的 大 小 和 空间 协调 。 

。 避免 空旷 的 界面 上 放置 很 大 的 按钮 。 
放置 完 控件 后 界面 不 应 有 很 大 的 空缺 位 置 。 
字体 的 大 小 要 与 界面 的 大 小 比例 协调 ,通常 使 用 的 字体 中 宋体 9 一 12 号 较为 美观 ,很 
少 使 用 超过 12 号 的 字体 。 
前 景 与 背景 色 搭 配合 理 协 调 ,反差 不 宜 太 大 ,最 好 少 用 深 色 , 如 大 红 、 大 绿 等 。 常 用 色 
考虑 使 用 Windows 界面 色调 。 
。 如 果 使 用 其 他 颜色 , 主 色 要 柔和 ,具有 亲和力 与 磁力 ,杜绝 刺 目的 颜色 。 
大 型 系统 常用 的 主 色 有 "#ElEl1E1"、"#EFEFEF"、"##C0OC0C0" 等 。 
。 界面 风格 要 保持 一 致 , 字 的 大 小 、 颜 色 、 字 体 要 相同 ,除非 是 需要 艺术 处 理 或 有 特殊 要 
求 的 地 方 。 
如 果 窗 体 支持 最 小 化 和 最 大 化 或 放大 时 , 窗 体 上 的 控件 也 要 随 着 窗 体 而 缩放 ,切忌 只 
放大 窗 体 而 忽略 控件 的 缩放 。 
。 对 于 含有 按钮 的 界面 一 般 不 应 该 支持 缩放 , 即 右 上 角 只 有 关闭 功能 。 
通常 父 窗 体 支 持 缩放 时 , 子 窗 体 没有 必要 缩放 。 
。 如 果 能 给 用 户 提供 自 定义 界面 风格 则 更 好 ,由 用 户 自己 选择 颜色 .字体 等 。 
6. 菜单 位 置 原则 
菜单 是 界面 上 最 重要 的 元 素 ,菜单 位 置 按照 功能 来 组 织 。 菜 单 设置 细则 : 
。 菜单 通常 采用 “常用 ”一 “主要 ”一 “次 要 ”一 “工具 ”一 “帮助 ”的 位 管 排列 ,符合 流行 的 
Windows 风格 。 
常用 的 有 "文件 “编辑 "“ 查 看 ”等 ,几乎 每 个 系统 都 有 这 些 选 项 ,当然 要 根据 不 同 的 
系统 有 所 取舍。 
下 拉 菜 单 要 根据 菜单 选项 的 含义 进行 分 组 ,并 且 按 照 一 定 的 规则 进行 排列 ,用 横 线 
隔 开 。 
一 组 菜单 的 使 用 有 先后 要 求 或 有 向 导 作 用 时 ,应 该 按 先 后 次 序 排 列 。 
没有 顺序 要 求 的 菜单 项 按 使 用 频率 和 重要 性 排列 ,常用 的 放 在 开头 ,不 常用 的 靠 后 放 
置 ; 重要 的 放 在 开头 ,次 要 的 放 在 后 边 。 
如 果菜 单 选项 较 多 ,应 该 采用 加 长 菜单 的 长 度 而 减少 深度 的 原则 排列 。 


菜单 深度 一 般 要 求 最 多 控制 在 三 层 以 内 。 
。 对 常用 的 菜单 要 有 快捷 命令 方式 ,组 合 原则 见 原则 8。 
。 对 与 进行 的 操作 无 关 的 菜单 要 用 屏蔽 的 方式 加 以 处 理 ,如 果 采 用 动态 加 载 方 式 , 即 只 
有 需要 的 菜单 才 显 示 最 好 。 
菜单 前 的 图 标 不 宜 太 大 ,与 字 高 保持 一 致 最 好 。 

。 主 菜单 的 宽度 要 接近 ,字数 不 应 多 于 4 个 ,每 个 菜单 的 字数 能 相同 最 好 。 

。 主 菜 单数 目 不 应 太 多 ,最 好 为 单 排 布置 。 

7. 独特 性 原则 

如 果 一 味 地 遵循 业界 的 界面 标准 , 则 会 丧失 自己 的 个 性 。 在 框架 符合 以 上 规范 的 情况 下 ， 
设计 具有 自己 独特 风格 的 界面 尤为 重要 ,尤其 在 商业 软件 流通 中 有 着 很 好 的 潜移默化 的 广告 
效用 。 独 特性 细则 : 

。 安装 界面 上 应 有 单位 介绍 或 产品 介绍 ,并 有 自己 的 图 标 或 徽标 。 
主 界面 ,最 好 是 大 多 数 界 面 上 要 有 公司 图 标 或 徽标 。 
登录 界面 上 要 有 本 产品 的 标志 ,同时 包含 公司 图 标 或 徽标 。 
帮助 菜单 的 “关于 ”中 应 有 版 权 和 产品 信息 。 
公司 的 系列 产品 要 保持 一 致 的 界面 风格 ,如 背景 色 字体、 菜单 排列 方式 图标 、 安 装 过 
程 、 按 钮 用 语 等 应 该 大 体 一 致 。 
应 为 产品 制作 特有 的 图 标 并 区 别 于 公司 图 标 或 徽标 。 

8. 快捷 方式 的 组 合 原则 

在 菜单 及 按钮 中 使 用 快捷 键 可 以 让 喜欢 使 用 键盘 的 用 户 操作 得 更 快 一 些 ,在 西 文 
Windows 及 其 应 用 软件 中 快捷 键 的 使 用 大 多 是 一 致 的 。 菜 单 组 合 键 推荐 ， 

。 面向 事务 的 组 合 : Ctrl 十 D( 删 除 ) .Ctrl 十 F( 寻 找 ) .Ctrl 十 H( 蔡 换 ) .Ctrl 十 I( 插 入 )、 
Ctrl 十 N( 新 记录 ) `Ctrl 十 SC 保存 ) .Ctrl 十 O( 打 开 ) 。 
列表 : Ctrl 十 R( 刷 新 ) .Ctrl 十 G( 定 位 ) .Ctrl 十 Tab( 下 一 分 页 窗口 或 反 序 浏览 同一 页 面 
控件 ) 。 
编辑 : Ctrl 十 A( 全 选 ) .Ctrl 二 C( 复 制 ) \ Ctrl 十 V( 粘 贴 ) .Ctrl 十 X( 剪 切 ) .Ctrl 十 Z( 撤 销 
操作 ) .Ctrl 十 Y( 恢 复 操 作 ) 。 
文件 操作 : Ctrl 十 P( 打 印 ) .Ctrl 十 W( 关 闭 ) 。 
系统 菜单 : Alt 十 A( 文 件 ) .Alt 十 E( 编 辑 ) .Alt 十 T( 工 具 ) 、Alt 十 W( 窗 口 ) Alt 十 H( 帮 助 ) 。 
MS Windows 保留 键 : Ctrl 十 Esc( 任 务 列表 )、Ctrl 十 F4( 关 闭 窗口 )、Alt 十 F4( 结 束 应 
用 )、Alt 十 Tab( 下 一 应 用 )、Enter( 上 默认 按钮 /确认 操作 )、Esc( 取 消 按 钮 /取消 操作 )、 
Shift 十 F1( 上 下 文 相关 帮助 ) 。 

按钮 组 合 键 推 荐 : Alt 十 Y( 确 定 , 是 )、Alt 十 C( 取 消 )、Alt 十 N( 否 )、Alt 十 D( 删 除 )、Alt 十 
Q( 退 出 )、Alt 十 A( 添 加 ) 、Alt 十 E( 编 辑 ) .Alt 十 B( 浏 览 )、Alt 十 R( 读 )、Alt 十 W( 写 )。 

这 些 快捷 键 也 可 以 作为 开发 中 文 应 用 软件 的 标准 ,但 也 可 使 用 汉语 拼音 的 开头 字母 。 

9. 排 错 性 考虑 原则 

在 界面 上 通过 下 列 方式 来 控制 出 错 几 率 会 大 大 减少 系统 因 用 户 人 为 的 错误 引起 的 破坏 。 
开发 者 应 当 尽 量 周全 地 考虑 到 各 种 可 能 发 生 的 问题 ,使 出 错 的 可 能 降 至 最 小 。 如 应 用 出 现 保 
护 性 错误 而 退出 系统 ,这 种 错误 最 容易 使 用 户 对 软件 失去 信心 。 因 为 这 意味 着 用 户 要 中 断 思 
路 ,并 费时 费力 地 重新 登录 ,而 且 已 进行 的 操作 也 会 因 没有 存盘 而 全 部 丢失 。 排 错 性 细则 : 


最 重要 的 是 排除 可 能 会 使 应 用 非 正常 中 止 的 错误 。 

应 当 注 意 尽 可 能 避免 用 户 无 意 录 入 无 效 的 数据 。 

采用 相关 控制 限制 用 户 输入 值 的 种 类 。 

当 用 户 作 出 选择 的 可 能 性 只 有 两 个 时 ,可 以 采用 单 选 框 。 

当选 择 的 可 能 再 多 一 些 时 ,可 以 采用 复 选 框 ,每 一 种 选择 都 是 有 效 的 ,用 户 不 可 能 输入 

任何 一 种 无 效 的 选择 。 

当选 项 特别 多 时 ,可 以 采用 列表 框 、 下 拉 式 列表 框 。 

在 应 用 系统 中 ,应 当 避 免 用 户 作 出 未 经 授权 或 没有 意义 的 操作 。 

对 可 能 引起 致命 错误 或 系统 出 错 的 输入 字符 或 动作 要 加 限制 或 屏蔽 。 

对 可 能 发 生 严重 后 果 的 操作 要 有 补救 措施 。 通 过 补救 措施 用 户 可 以 回 到 原来 的 正确 

状态 。 

对 一 些 特殊 符号 .与 系统 使 用 的 符号 相 冲 突 的 字符 等 进行 判断 并 阻止 用 户 输入 。 

对 错误 操作 最 好 支持 可 逆 性 处 理 , 如 取消 系列 操作 。 

在 输入 有 效 性 字符 之 前 应 该 阻止 用 户 进行 操作 ,只 有 输入 之 后 才 可 进行 操作 。 

对 可 能 造成 等 待 时 间 较 长 的 操作 应 该 提供 取消 功能 。 

特殊 宇 符 常 有 8 全 2 人 ER EN 直人 0% 

$、#、\@.!、 一 。?、/, 还 有 空格 。 

与 系统 采用 的 保留 字符 冲突 的 要 加 以 限制 。 

在 读 入 用户 所 输入 的 信息 时 ,根据 需要 选择 是 否 去 掉 前 后 空格 。 

有 些 读 入 数据 库 的 字段 不 支持 中 间 有 空格 ,但 用 户 确实 需要 输入 中 间 空 格 ,这 时 要 在 

程序 中 加 以 处 理 。 

10. 多 窗口 的 应 用 与 系统 资源 原则 

设计 良好 的 软件 不 仅 要 有 完备 的 功能 ,而 且 要 尽 可 能 地 占用 最 低 限度 的 资源 。 资 源 细节 ; 

在 多 窗口 系统 中 ,有 些 界 面 要 求 必须 保持 在 最 顶层 ,避免 用 户 在 打开 多 个 窗口 时 ,不 停 

地 切换 甚至 最 小 化 其 他 窗口 来 显示 该 窗口 。 

。 在 主 界面 载 人 完毕 后 自动 印 出 内 存 , 让 出 所 占用 的 Windows 系统 资源 。 

关闭 所 有 窗 体 , 系 统 退 出 后 要 释放 所 占 的 所 有 系统 资源 ,除非 是 需要 后 台 运 行 的 系统 。 

尽量 防止 对 系统 的 独占 使 用 。 

。 窗口 能 否 基 于 相关 的 输入 或 菜单 命令 适当 地 打开 。 

。 窗口 能 否 改变 大 小 、 移 动 和 滚动 。 

。 窗口 中 的 数据 内 容 能 否 使 用 鼠标 、 功 能 键 方向 箭头 和 键盘 访问 。 

。 当 被 覆盖 并 重 调用 后 ,窗口 能 否 正确 地 再 生 。 

。 需要 时 能 否 使 用 所 有 窗口 相关 的 功能 。 

。 所 有 窗口 相关 的 功能 是 可 操作 的 吗 ? 

。 是 否 有 相关 的 下 拉 式 菜单 .工具 条 滚动 条 、 对 话 框 、 按 钮 .图 标 和 其 他 控制 可 为 窗口 可 
用 ,并 适当 地 显示 。 

。 显示 多 个 窗口 时 ,窗口 的 名 称 是 否 被 适当 地 表示 。 

活动 窗口 是 否 被 适当 地 加 亮 。 

。 如 果 使 用 多 任务 ,是 否 所 有 的 窗口 被 实时 更 新 。 

多 次 或 不 正确 按 鼠 标 是 否 会 导致 无 法 预料 的 副作用 。 


。 窗口 的 声音 和 颜色 提示 及 窗口 的 操作 顺序 是 否 符合 需求 。 
。 窗口 是 否 正确 地 关闭 。 


9.1.3 GUI 测试 内 容 


图 形 用 户 界 面 的 测试 (GUI testing) 主 要 包括 导航 测试 .界面 显示 测试 和 界面 功能 测试 。 

导航 描述 了 用 户 在 不 同 的 界面 之 间 不同 的 用 户 接口 控制 之 间 完 成 某 个 事务 的 清晰 、 完 整 
的 程度 ,如 按钮 .对话 框 列表 和 窗口 等 。 

在 一 个 界面 上 放 太 多 的 信息 往往 起 到 与 预期 相反 的 效果 。GUI 应 用 系统 的 用 户 趋向 于 
目的 驱动 ,很 快 地 扫描 一 个 GUI 应 用 系统 ,看 是 否 有 满足 自己 需要 的 信息 ,如 果 没 有 ,就 会 很 
快 地 离开 。 很 少 有 用 户 愿 意 花 时 间 去 熟悉 GUI 应 用 系统 的 结构 ,因此 ,GUI 应 用 系统 导航 帮 
助 要 尽 可 能 地 准确 。 

导航 的 另 一 个 重要 方面 是 GUI 应 用 系统 的 界面 结构 .导航 菜单. 连接 的 风格 是 否 一 致 
确保 用 户 赁 直觉 就 知道 GUI 应 用 系统 里 面 是 否 还 有 内 容 , 内 容 在 什么 地 方 。 

界面 显示 测试 主要 指 界面 的 外 形 是 否 与 设计 内 容 一 致 ,其 中 包括 标准 化 测试 和 用 户 图 形 
界面 的 测试 。 标 准 化 意味 着 正在 开发 的 应 用 程序 应 该 有 标准 的 外 观 , 并 且 在 感觉 上 保持 一 致 。 
GUI 这 一 部 分 不 能 被 固化 ,因为 一 旦 设 定 了 GUI 指南 就 可 能 会 被 育 目 地 追随 。 不 同 的 公司 ， 
程序 之 间 的 GUI 标准 是 不 同 的 。 但 还 是 可 以 设置 一 些 普遍 性 的 指南 ,对 如 何 开始 GUI 测试 
有 一 个 全 面 的 认识 。 

界面 功能 测试 是 指 当 界 面 元 素 被 赋予 各 种 值 时 ,系统 处 理 是 否 符合 设计 要 求 。 主 要 包括 
确认 测试 和 功能 测试 。 

确认 测试 主要 依赖 设置 在 对 话 框 中 的 字段 和 其 必须 执行 的 功能 。 例 如 对 于 只 可 以 输入 数 
值 的 文本 框 字段 ,必须 检查 是 否 只 能 够 接受 数字 ,不 能 接受 字母 ,如 果 字 段 只 可 以 接受 数字 , 例 
如 所 有 的 日 期 .电话 号 码 .邮编 等 数字 ,那么 就 不 能 接受 负数 等 。 

功能 测试 检查 软件 是 否 包括 了 软件 的 需求 说 明 书 或 者 功能 说 明 书 提 及 的 功能 。 例 如 ,在 
应 用 程序 中 创建 联系 人 地 址 。 创 建 联系 人 地 址 的 功能 应 该 可 以 新 增 联系 人 ,删除 联系 人 和 更 
新 联系 人 信息 。 联 系 人 信息 包括 姓名 、 地 址 、 城 市 .省份 .邮编 .国家 、 电 话 等 信息 ,也 可 以 增加 
其 他 的 信息 。 开 始 时 只 有 新 增 按钮 可 用 ,删除 、 更 新 按钮 应 该 不 可 用 。 这 是 因为 在 开始 时 没有 
数据 可 以 被 删除 或 修改 (除非 新 增 一 个 )。 简 单 地 说 ,除非 有 一 个 可 用 的 记录 ,要 不 然 是 不 可 能 
被 修改 或 删除 的 。 只 有 从 列表 中 选择 了 一 个 记录 ,删除 和 更 新 按钮 才 可 以 使 用 ,同时 新 增 按钮 
变 为 不 可 用 。 在 真实 地 执行 删除 和 更 新 操作 时 ,必须 给 予 确认 信息 。 在 删除 操作 时 列表 中 应 
该 不 再 显示 已 删除 的 项 目 。 又 如 ,当选 择 “ 打 开 文 档 ” 时 ,系统 应 当 弹 出 一 个 打开 文档 的 对 话 
框 , 而 不 是 弹出 一 个 保存 文档 的 对 话 框 或 别 的 对 话 框 。 


9.1.4 GUI 测试 的 设计 及 自动 化 


1. GUI 测试 设计 的 问题 

GUI 测试 是 困难 的 ,这 主要 是 因为 : 

(1) 一 个 GUI 的 可 能 接口 空间 是 非常 庞大 的 。 每 个 GUI 活动 序列 可 能 会 导致 系统 处 在 
不 同 的 状态 上 。 一 般 来 说 ,GUI 活动 的 结果 在 系统 不 同 的 状态 上 是 不 同 的 。 这 样 就 必须 在 一 个 
十 分 庞大 的 状态 集 上 进行 GUI 测试 ,这 个 工作 一 般 难以 完成 ,即使 借助 自动 化 工具 进行 测试 。 

(2) GUI 的 事件 驱动 特性 。 由 于 用 户 可 能 会 单 击 屏幕 上 的 任何 一 个 像素 ,因此 ,对 GUI 


来 说 可 能 会 产生 非常 多 的 用 户 输入 。 模 拟 这 类 输入 是 困难 的 。 

(3) GUI 测试 的 覆盖 率 不 同 于 传统 的 结构 化 覆盖 率 ,理论 上 不 够 成 熟 , 且 没有 合适 的 自动 
化 工具 。 

(4) 界面 的 美学 具有 很 大 的 主观 性 。 界 面 元 素 的 大 小 ,元 素 间 的 组 合 及 排列 的 次 序 , 界 面 
元 素 的 位 置 ,界面 的 颜色 等 ,这 些 对 不 同 的 用 户 来 说 可 能 会 有 不 同 的 结果 ,因此 如 何 才能 代表 
大 部 分 客户 的 意见 也 是 界面 测试 的 一 个 难点 。 尤 其 测试 人 员 之 间 在 这 些 方面 的 不 同意 见 可 能 
会 导致 开发 人 员 的 抵制 。 

(5) 糟糕 的 设计 使 得 界面 与 功能 混杂 在 一 起 ,使 得 界面 的 修改 会 导致 更 多 的 错误 ,同时 也 
增加 了 测试 的 难度 和 测试 的 工作 量 。 

2. GUI 测试 设计 

为 了 更 好 地 进行 GUI 测试 ,提倡 界面 与 功能 的 设计 分 离 。 一 般 可 以 把 GUI 系统 分 为 3 
个 层次 : 界面 层 、 界 面 与 功能 的 接口 层 、 功 能 层 。 这 样 ,GUI 的 测试 可 以 把 重点 放 在 界面 层 和 
界面 与 功能 的 接口 层 上 ,并 可 使 用 黑 盒 测试 原理 进行 功能 测试 。 

在 设计 GUI 测试 用 例 时 ,可 以 按 如 下 3 个 步骤 进行 思考 : 

(1) 划分 界面 元 素 ,并 根据 界面 的 复杂 性 进行 分 级 。 

一 般 可 以 把 界面 分 为 3 个 级 别 。 

第 一 级 是 界面 原子 。 界 面 原子 是 指 不 可 再 分 的 界面 元 素 , 例 如 一 个 菜单 栏 内 的 某 个 菜单 
项 一 个 按钮 一 个 列表 框 一 个 编辑 框 、 工 具 栏 中 的 一 个 图 标 ,一 个 快捷 键 \ 一 个 静态 文本 等 。 
在 这 些 界面 原子 中 ,有 的 是 用 于 接受 输入 的 ; 有 的 是 用 于 输出 显示 的 ; 有 的 是 显 性 的 ,在 界面 
上 可 以 直接 观察 到 ; 有 的 是 隐 性 的 ,在 界面 上 无 法 直接 观察 到 ,只 能 通过 某 些 操作 来 激活 ; 有 
的 是 在 系统 的 整个 生命 周期 中 一 直 存 在 的 ; 有 的 是 在 系统 生命 周期 过 程 中 动态 产生 ,并 会 动 
态 消失 的 ; 有 的 是 动态 的 ; 有 的 是 静态 的 。 

第 二 级 是 界面 组 合 元 素 。 这 些 界面 组 合 元 素 是 由 多 个 具有 相同 属性 的 界面 原子 或 者 相关 
的 一 组 界面 原子 组 合 而 形成 的 一 类 界面 元 素 , 例 如 工具 栏 ` 组 合 框 、. 表 格 .菜单 栏 等 。 

第 三 级 是 完整 的 窗口 。 一 个 完整 的 窗口 是 由 一 系列 界面 组 合 元 素 组 成 的 能 够 完成 一 个 完 
整 的 输入 输出 功能 的 界面 属性 组 合 ,并 且 它 具有 自己 的 视窗 (View) ,例如 一 个 对 话 框 、 一 个 单 
文档 窗口 、 多 文档 系统 的 一 个 子 窗口 等 。 

(2) 根据 不 同 的 界面 级 别 确定 不 同 的 测试 策略 。 

一 般 在 界面 原子 级 ,主要 考虑 该 界面 的 显示 属性 、 触 发 机 制 、 功 能 行为 .可 能 的 状态 集 等 内 
容 。 对 于 界面 原子 可 以 接受 的 输入 ,可 以 从 等 价 类 的 划分 .边界 值 的 分 析 等 角度 考虑 ,触发 机 
制 可 以 从 规范 导出 的 方法 分 析 , 功 能 行为 可 以 使 用 因果 图 或 判定 表 , 可 能 的 状态 集 可 以 使 用 错 
误 猜 测 法 或 基于 错误 的 测试 方法 等 。 

对 于 界面 组 合 元 素 , 主 要 考虑 界面 原子 的 组 合 顺 序 ,排列 组 合 、 整 体外 观 、 组 合 后 功能 行为 
的 多 个 角度 进行 测试 。 

对 于 完整 的 窗口 ,主要 考虑 窗口 的 整体 外 观 、 窗 口 元 素 的 排列 组 合 、 窗 口 属性 值 、 窗 口 可 能 
的 各 种 组 合 行为 或 可 能 的 操作 路 径 等 。 

(3) 进行 测试 数据 的 分 析 , 提 取 测 试用 例 。 

对 于 界面 元 素 的 外 观 ,可 以 从 以 下 几 个 角度 获取 测试 数据 : 

。 界面 元 素 的 大 小 、 形 状 、 色 彩 、 对 比 度 、 明 亮度 等 ; 

。 界面 元 素 包 含 的 文字 属性 (如 字体 .排序 方式 .大 小 等 ) 。 


对 于 界面 元 素 的 布局 ,可 以 从 以 下 几 个 角度 获取 测试 数据 : 
。 各 界面 元 素 位 置 、 对齐 方式 ; 
。 各 界面 元 素 间 的 间隔 ; 
。 输入 Tab 键 后 的 移动 顺序 ; 
。 各 界面 元 素 间 色彩 的 搭配 。 
对 于 界面 元 素 的 行为 ,可 以 从 以 下 几 个 角度 获取 测试 数据 : 
。 回 显 功 能 ; 
。 输入 的 提示 和 输入 检查 ; 
。 联 机 帮助 ; 
。 默认 值 的 检查 ; 
。 激活 后 或 取消 激活 ; 
。 焦点 状态 ; 
功能 键 或 快捷 键 ; 

。 操作 路 径 ; 

。 行为 回 退 (Undo)。 

3. GUI 测试 自动 化 及 工具 选择 

软件 的 图 形 用 户 界面 测试 是 一 项 非常 复杂 而 烦琐 的 工作 ,现代 的 软件 产品 越 来 越 复 杂 , 通 
常 一 套 软件 会 包括 大 量 的 图 形 用 户 界面 ,每 个 图 形 用 户 界面 里 又 有 很 多 的 控制 对 象 以 及 各 种 
信息 的 交互 。 对 于 这 样 一 套 软件 ,即便 测试 只 覆盖 到 部 分 图 形 用 户 界面 ,工作 量 也 是 相当 大 
的 。 由 此 人 们 想到 利用 工具 来 进行 自动 化 测试 。 

图 形 用 户 界 面 功能 的 自动 测试 可 以 用 捕捉 /回放 工具 来 完成 ,但 是 在 实际 应 用 过 程 中 , 常 
常 因 为 捕 提 /回放 工具 固有 的 缺陷 而 大 大 削弱 了 它 的 效力 ,引起 人 们 对 自动 化 测试 工具 可 用 性 
的 忧虑 。 如 捕捉 /回放 工具 对 GUI 对 象 的 识别 能 力 严重 依赖 于 被 测 软件 所 使 用 的 编程 语言 
这 一 因素 大 大 增加 了 测试 脚本 的 维护 工作 量 。 例 如 ,如 果 捕 提 / 回 放 工 具 可 以 识别 C++ 语言 开 
发 环境 .OO 方法 定义 的 对 象 (如 buttons .menu 等 ) ,通常 在 界面 布局 调整 时 , 它 仍然 可 以 识别 
出 新 界面 上 的 所 有 元 素 ,但 是 很 可 能 它 不 能 够 识别 Oracle 应 用 程序 ,如 用 OCX 开发 的 程序 界 
面 中 的 对 象 ,这 时 不 得 不 向 供应 商 寻 找 相 应 的 支持 软件 。 

捕捉 /回放 工具 通过 对 程序 运行 过 程 的 录制 产生 的 测试 脚本 通常 只 能 作为 设计 测试 用 例 
的 初始 原型 ,必须 经 过 大 量 的 修改 和 对 脚本 编程 的 工作 才能 重复 利用 ,如 增加 检查 点 (check 
point) ,进行 参数 化 等 。 因 此 ,GUI 自动 测试 的 设计 也 是 一 项 复杂 的 编程 与 开发 工作 。 

当然 ,以 上 问题 也 可 以 通过 采取 一 些 措 


施 尽 可 能 避免 ,如 通过 在 所 测试 的 软件 和 测 | , = 
试 脚本 中 增加 一 个 抽象 层 ,通过 建立 可 重复 
使 用 的 函数 库 ( 测 试用 例 库 ) ,通过 增加 测试 

数据 文件 使 脚本 编码 与 测试 数据 分 开 , 脚 本 

功能 的 扩展 ,脚本 语言 的 规范 化 等 措施 增强 

工具 的 作用 并 减少 维护 工作 量 ,图 9-1 和 C= 
图 9-2 分 别 是 简单 和 扩展 的 GUI 自动 化 测 结果 


试 方法 示意 图 。 虽然 自动 化 测试 工具 还 存 
在 很 多 问题 ,但 是 它 最 大 的 好 处 是 可 以 通过 图 9-1 简单 的 GUI 自动 化 测试 方法 示意 图 


用 例 的 重用 来 大 大 减少 重复 的 测试 设计 工作 量 , 这 也 是 至 今 人 们 还 坚持 不 懈 地 研究 自动 化 测 
试 技术 的 原因 。 
抽象 层 


时 哈 志 三思 被 测试 的 应 用 
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9-2 扩展 的 GUI 自动 化 测试 方法 示意 图 
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选择 GUI 测试 工具 对 GUI 的 自动 化 测试 尤为 重要 ,下 面 给 出 了 作为 优秀 的 工具 所 应 该 
具备 的 12 个 重要 功能 。 

(1) 规范 和 强大 的 脚本 语言 。 

每 个 自动 化 的 GUI 测试 工具 都 有 一 个 编写 脚本 的 脚本 语言 ,此 语言 越 强大 ,其 潜在 拥有 
的 控制 就 越 多 。 使 用 成 熟 的 脚本 语言 能 够 创建 更 加 成 熟 的 脚本 。 

(2) 优秀 的 元 用 户 界 面 元 素 识别 器 。 

一 个 优秀 的 工具 可 以 识别 多 种 典型 窗口 的 用 户 界 面 元 素 , 而 不 是 让 使 用 者 试图 通过 坐标 
指向 它们 。 

(3) 提供 可 反复 调用 的 函数 库 。 

提供 可 重用 的 库 文件 能 更 有 效 ,方便 地 维护 自动 化 脚本 。 

(4) 提供 外 部 的 函数 库 。 

如 果 自 动 化 测试 工具 能 够 访问 外 部 的 库 文件 ,如 能 调用 Windows 的 . dll 文件 等 ,会 给 
GUI 的 自动 化 测试 带 来 很 大 的 方便 ,也 使 得 工具 变 得 更 加 强大 。 

(5) 可 实现 抽象 层 。 

“抽象 层 ? 就 是 为 物理 的 用 户 界 面 元 素 定义 逻辑 名 称 , 这 样 就 不 必 为 物理 的 用 户 界面 元 素 
经 常 变化 而 烦恼 ,抽象 层 的 目的 就 是 使 维护 测试 变 得 更 轻松 。 一 些 工具 称 它 为 test map 或 UI 
map, 也 有 一 些 称 其 为 test frame。 

(6) 提供 分 布 式 测试 的 可 能 。 

对 于 测试 多 用 户 的 软件 ,工具 需要 能 够 提供 创建 包含 多 个 模拟 用 户 的 测试 。 

(7) 具有 文件 输入 输出 的 可 能 。 

提供 文件 的 输入 输出 功能 ,使 得 工具 能 够 读 写 存放 在 存储 器 上 的 文件 (通常 是 ASCII 文 
件 ) , 它 是 “数据 驱动 测试 自动 化 "的 核心 。 

(8) 提供 错误 处 理 功 能 。 

拥有 优异 的 错误 处 理 系 统 的 工具 使 其 他 的 脚本 在 出 现 问题 后 ,甚至 于 脚本 失败 之 后 可 以 
继续 运行 。 工 具 可 以 停止 失败 的 脚本 ,然后 在 开始 下 一 个 脚本 之 前 重新 设置 软件 到 它 初始 的 
状态 ,这样 使 自动 化 测试 更 加 健壮 。 

(9) 包含 调试 器 。 

调试 器 是 嵌入 在 测试 脚本 开发 环境 中 的 ,通常 调试 器 使 用 户 能 够 一 步 步 地 按 行 执行 脚本 ， 


设置 “ 断 点 ”( 即 调试 器 可 以 停 下 执行 脚本 并 且 等 待 下 一 个 指令 的 地 方 ), 并 且 检 查 当 前 定义 的 
变量 和 它们 的 值 。 利 用 调试 器 能 高 效 、 快 速 地 找到 脚本 中 的 问题 。 

(10) 源 代码 控制 。 

测试 自动 化 其 实 更 多 的 是 软件 开发 过 程 . 源 代码 控制 应 该 是 它 的 基础 性 工具 。 一 般 来 说 ， 
源 代码 控制 系统 允许 从 一 个 主 库 中 的 check in 或 check out 文件 回 滚 到 先前 的 版 本 , 找 出 版 本 
之 间 的 差异 ,并 且 同 时 追踪 几 个 项 目 。 这 些 功能 使 得 多 个 人 员 在 源码 文件 的 多 个 版 本 上 工作 
成 为 可 能 。 

与 其 寻找 一 个 包括 了 源 代码 控制 功能 的 测试 工具 ,不 如 使 用 和 软件 开发 人 员 所 使 用 的 一 
样 的 源 代码 控制 系统 ,实际 上 这 样 也 会 更 好 些 。 

(11) 提供 命令 行 脚 本 执行 。 

通过 使 用 命令 行 运行 脚本 的 能 力 使 在 某 个 事件 后 (如 新 的 测试 版 本 的 到 来 ) 自 动 地 开始 自 
动 化 测试 成 为 可 能 。 

(12) 用 户 社区 。 

需要 一 个 能 提供 各 种 帮助 的 用 户 社区 ,寻找 一 个 拥有 已 建立 用 户 社区 的 工具 。 用 户 通 过 
社区 网 站 和 当地 用 户 团体 进行 学 习 和 交流 ,以 解决 工具 使 用 中 的 各 种 问题 。 用 户 社区 的 成 员 
常常 会 共享 通用 函数 的 库 文件 或 其 他 一 些 有 用 的 源 代码 ,这样 会 对 工具 使 用 者 开发 内 部 可 重 
用 的 库 文件 有 很 大 的 帮助 。 


9.2 Web 应 用 系统 测试 


9.2.1 Web 系统 基本 组 成 


C/SCClient/Server ,客户 端 /服务 器 ) 和 B/S(Browser/Server, 浏 览 器 /服务 器 ) 是 当今 世 
界 开发 模式 技术 架构 的 两 大 主流 技术 ,C/S 是 美国 Borland 公司 最 早 研发 的 ,B/S 是 美国 微软 
公司 研发 的 。 两 种 架构 各 有 其 优 缺 点 。B/S 结构 是 随 着 Internet 技术 的 兴起 ,对 C/S 结构 的 
一 种 变化 或 者 改进 的 结构 。 在 这 种 结构 下 ,用 户 工作 界面 是 通过 WWW 浏览 器 来 实现 , 极 少 
部 分 事务 旬 辑 在 前 端 (Browser) 实 现 , 但 是 主要 事务 逻辑 在 服务 器 端 (Server) 实 现 ,形成 所 谓 
三 层 (3-tier) 结 构 。 相 对 于 C/S 结构 属于 * 胖 ?客户 端 ,需要 在 使 用 者 计算 机 上 安装 客户 端 软件 
来 说 ,B/S 结构 属于 一 种 * 瘦 ?客户 端 ,大 多 数 或 主要 的 业务 多 辑 都 在 服务 器 端 ,因此 ,B/S 结构 
的 系统 不 需要 安装 客户 端 软件 , 它 运 行 在 客户 端的 浏览 器 之 上 ,系统 升级 或 维护 时 只 需 更 新 
服务 器 端 软件 即 可 ,这 样 就 大 大 简化 了 客户 端 计算 机 载荷 ,减轻 了 系统 维护 与 升级 的 成 本 
和 工作 量 , 降 低 了 用 户 的 总 体 成 本 。B/S 结构 系统 的 产生 为 系统 面 对 无 限 未 知 用 户 提供 了 
可 能 。 当 然 ,与 C/S 结构 相 比 ,B/S 结构 也 存在 着 系统 运行 速度 较 慢 ,访问 系统 的 用 户 不 可 
控 的 弱点 。 

Web 系统 从 技术 上 来 讲 , 无 论 是 . NET 还 是 J2EE, 都 是 多 层 构架 ,有 界面 层 . 业 务 罗 辑 
层 .数据 层 。 其 次 ,从 结构 上 来 讲 , 都 有 客户 端 部 分 、 传 输 网 络 部 分 和 服务 器 端 部 分 。 一 个 典型 
的 Web 系统 包括 : 

(1) 访问 客户 端 : 包含 用 户 操 作 的 浏览 器 及 运行 平台 。 最 常见 的 一 个 例子 就 是 Windows 
XP 十 IE8.0, 另 外 ,还 有 Windows 及 其 他 平台 上 的 Netscape、Opera、Mozilla 等 浏览 器 。 

(2) Web 应 用 服务 器 : 用 于 发 布 Web 页 面 ,接受 来 自 客户 端的 请 求 ,并 把 请 求 的 处 理 结 


果 返 回 客户 端 。 一 般 采用 的 Web 应 用 服务 程序 有 各 种 版 本 UNIX 上 的 Apache、WebLogic， 
Windows 服务 器 上 的 Tomcat IIS 等 。 

(3) 数据 库 : 虽然 数据 库 不 是 Web 系统 的 必要 部 分 ,但 在 现 有 的 大 多 数 Web 系统 中 , 数 
据 库 是 重要 的 部 分 。 数 据 库 多 为 关系 型 数据 库 , 常 用 的 有 Oracle、SQL Server、Sybase 和 
MySql 等 。 

(4) 网 络 及 中 间 件 : 提供 客户 端的 请 求 到 Web 服务 器 的 通道 。 网 络 可 以 是 Internet/ 
Intranet/Extranet, 也 可 能 是 局 域 网 。 中 间 件 常常 是 传输 中 间 件 或 交易 中 间 件 。 

(5) 防火 墙 与 CA(Certificate Authority) 认 证 : 系统 的 安全 性 的 一 个 保障 系统 ,对 于 重要 
的 系统 也 必 不 可 少 。 

另外 ,一 些 大 型 Web 系统 为 了 承受 较 大 的 访问 压力 ,会 采用 负载 均衡 技术 ,使 用 多 个 
Web 应 用 服务 器 分 担 来 自 客 户 端的 访问 压力 。 


9.2.2 Web 应 用 系统 测试 综述 


Web 系统 可 能 包含 多 个 物理 服务 器 ,每 个 服务 器 可 以 用 做 一 种 或 多 种 服务 器 类 型 。 比 
如 ,一 个 Web 系统 可 能 包括 多 个 Web 服务 器 .应 用 服务 器 和 数据 库 服务 器 (如 服务 器 群 , 即 一 
组 共享 工作 负荷 的 相似 服务 器 )。Web 系统 可 能 还 包括 其 他 服务 器 类 型 ,如 电子 邮件 服务 器 、 
聊天 服务 器 .电子 商务 服务 器 以 及 用 户 特 征 信息 服务 器 。 

在 Web 系统 的 最 高 层 , Web 系统 可 能 包含 各 种 操作 系统 、Web 服务 器 .应 用 服务 器 .中 间 
件 、 电 子 商务 服务 器 、 数 据 库 服务 器 、 主 要 的 企业 资源 规划 (ERP) 组 件 、 防 火 墙 和 浏览 器 。Web 
系统 软件 的 组 合 可 能 包含 以 下 几 种 : 

(1) 多 个 操作 系统 ; 

(2) 多 个 软件 包 ; 

(3) 多 个 软件 组 件 ; 

(4) 多 个 服务 器 类 型 .品牌 和 模型 ; 

(5) 多 个 浏览 器 品牌 和 版 本 。 

Web 系统 的 服务 器 端 应 用 在 两 个 方面 不 同 于 客户 端 应 用 : 

(1) 服务 器 端 应 用 不 存在 与 系统 最 终 用 户 相 交互 的 用 户 界 面 ; 客户 端 通过 通信 协议 、 应 
用 编程 接口 和 其 他 接口 标准 与 服务 器 端 应 用 进行 交互 以 调用 其 功能 和 访问 数据 。 

(2) 服务 器 端 应 用 是 自动 运行 的 。 因 此 ,对 于 测试 人 员 来 说 ,服务 器 端 应 用 就 是 一 个 黑 盒 
子 。 一 种 用 来 提高 错误 重 现 能 力 的 方法 是 记录 事件 日 志 。 应 用 日 志 人 允许 跟踪 由 具体 应 用 生成 
的 事件 。 

对 于 Web 系统 分 布 式 服务 器 ,其 服务 器 软件 可 能 分 布 在 若干 个 物理 服务 器 单元 上 ,使 测 
试 更 为 复杂 。Web 应 用 可 以 支持 如 下 几 种 可 能 的 服务 器 配置 : 

(1) 单个 单元 模型 ; 

(2) 双 单元 模型 ; 

(3) 三 单元 模型 。 

Web 应 用 是 由 先前 存在 的 对 象 或 组 件 相互 结合 而 构造 的 。 因 此 ,新 创建 的 系统 不 仅 继承 
了 原 有 对 象 中 的 性 能 ,也 继承 了 原来 对 象 中 已 有 的 错误 。 面 向 对 象 编程 和 基于 组 件 编程 的 主 
要 优点 之 一 就 是 复 用 性 。Web 应 用 由 于 采用 了 基于 组 件 的 体系 结构 ,因此 特别 容易 出 现 错误 
共享 。 从 底层 来 看 ,这 种 问题 对 测试 有 两 个 主要 的 影响 : 


(1) 已 有 对 象 或 组 件 在 被 其 他 的 应 用 或 对 象 引 用 时 必须 经 过 了 全 面 测试 。 

(2) 必须 进行 过 全 面 的 回归 测试 。 

Web 系统 的 数据 经 常 是 分 布 式 的 。 在 标准 的 Web 应 用 系统 中 ,通常 使 用 关系 型 数据 库 ， 
对 数据 的 访问 和 操纵 比 使 用 文件 系统 更 高 效 。 在 文件 系统 中 查询 时 ,为 获得 数据 ,应 用 必须 确 
切 知道 文件 的 位 置 及 其 名 称 , 且 在 应 用 层 通常 还 要 施加 访问 安全 措施 。 数 据 库 以 表 记 录 的 形 
式 存储 数据 ,借助 数据 库 引擎 ,应 用 通过 获得 记录 集 来 访问 数据 ,无 须知 道 实 际 的 数据 文件 位 
置 和 名 称 。 关 系数 据 库 通过 数据 库 名 和 表 名 来 访问 ,而 且 可 存放 在 多 个 服务 器 上 。 采 用 关系 
型 数据 库 的 Web 系统 可 以 在 应 用 服务 器 级 、 数 据 库 服务 器 级 、 表 级 和 基于 用 户 的 优先 级 上 施 
加 安全 控制 。 

Web 系统 的 瘦 客 户 端 和 胖 客户 端 应 用 的 测试 问题 应 该 围绕 功能 兼容 性 和 性 能 等 几 个 方 
面 进行 折 中 考虑 。 

对 于 Web 系统 的 互 操作 问题 , 互 操作 性 是 指 系 统 或 系统 中 的 组 件 与 其 他 系统 或 组 件 相 交 
互 和 无 缝 协 作 的 能 力 。 一 般 通 过 某 些 应 用 编程 接口 .通信 协 议 标准 、 接 口 转换 技术 ,如 
CORBA 和 DCOM 等 来 实现 。 互 操作 性 可 能 导致 在 组 件 之 间 的 通信 出 现 信 息 丢 失 或 误解 的 
情况 。 

除了 传统 的 测试 之 外 ,Web 测试 还 包括 以 下 几 个 方面 : 

(1) Web 用 户 界面 的 实现 ; 

(2) 系统 集成 ; 

(3) 服务 器 端 和 客户 端 安装 ; 

(4) 基于 Web 的 帮助 ; 

(5) 配置 和 兼容 性 ; 

(6) 数据 库 ; 

(7) 安全 性 ; 

(8) 性 能 、 负 载 和 强度 (压力 )。 

针对 Web 系统 的 构成 和 Web 系统 的 一 些 特点 ,需要 对 涉及 Web 系统 质量 的 各 个 方面 进 
行 测试 。 按 系统 架构 来 分 ,可 分 为 客户 端的 测试 .服务 器 端的 测试 和 网 络 的 测试 ; 按 职能 来 
分 ,可 分 为 应 用 功能 的 测试 .Web 应 用 服务 的 测试 .安全 系统 的 测试 ,数据库 服务 的 测试 ; 按 软 
件 的 质量 特性 来 分 ,又 可 分 为 功能 测试 性 能 测试 .安全 性 测试 .兼容 性 测试 和 易 用 性 测试 等 。 
9.2.3 节 将 重点 讲述 Web 系统 的 测试 实施 。 


9.2.3 Web 应 用 系统 测试 的 实施 


1. 功能 测试 

Web 应 用 功能 测试 是 指 Web 应 用 系统 基本 功能 的 测试 ,其 用 例 的 设计 方法 可 参见 本 书 
第 3 章 的 内 容 。 本 节 主 要 对 与 功能 相关 的 链接 测试 表单 测试 数据 校 验 、 应 用 程序 特定 功能 ， 
如 cookie 等 方面 的 测试 进行 分 析 。 

考虑 到 Web 应 用 本 身 的 特点 ,在 对 其 进行 功能 测试 时 ,以 下 几 个 方面 值得 考虑 。 

(1) 客户 端的 选择 。 

Web 应 用 客户 端 软件 环境 主要 包括 操作 系统 和 浏览 器 。 除 非 有 特殊 要 求 ,否则 测试 功能 
时 ,一般 选择 比较 流行 的 配置 ,如 选择 Windows XP 十 IE8. 0 的 简体 中 文 版 本 。 需 要 注意 的 
是 ,浏览 器 的 种 类 和 版 本 有 可 能 影响 功能 的 正确 实现 。 


(2) 客户 端 浏览 器 的 配置 。 

一 般 情况 下 ,开发 者 不 会 过 多 地 考虑 客户 端 配置 问题 ,只 是 将 更 多 的 时 间 用 于 实现 服务 端 
的 程序 ,而 用 户 也 往往 不 会 刻意 地 对 所 使 用 的 浏览 器 进行 适应 性 配置 。 如 果 测 试 人 员 完 全 按 
照 浏览 器 的 默认 配置 测试 一 个 Web 应 用 的 功能 ,有 可 能 会 出 现 较 多 的 因 浏览 器 配置 而 引起 的 
问题 。 例 如 Cookie 设置 就 会 影响 含有 Cookie 的 Web 应 用 的 功能 能 否 成 功 地 实现 。 其 他 如 
脚本 设置 、 安 全 设置 ,显示 设置 等 大 多 数 设置 都 会 影响 到 Web 应 用 功能 的 实现 。 另 外 ,不 同类 
型 的 浏览 器 配置 可 能 存在 不 同 ,如 Firefox 浏览 器 等 。 

(3) 客户 端的 显示 设置 。 

大 多 数 人 都 喜欢 使 用 1024X768 像素 的 显示 设置 ,但 并 不 是 所 有 的 Web 应 用 都 支持 这 种 
设置 。 不 合适 的 显示 设置 不 但 会 使 Web 应 用 系统 的 界面 显示 异常 ,还 可 能 导致 应 用 功能 无 法 

(4) 内 容 测 试 。 

由 于 Web 应 用 带 有 一 定 的 开放 性 ,尤其 是 发 布 于 因特网 上 的 网 站 ,其 内 容 是 完全 开放 的 ， 
因此 在 Web 系统 的 功能 测试 中 还 要 重点 测试 一 个 方面 一 一 内 容 测 试 。 内 容 测 试用 来 检验 
Web 应 用 系统 提供 信息 的 正确 性 、 准 确 性 和 相关 性 。 信 息 的 正确 性 是 指 信息 是 可 靠 的 还 是 误 
传 的 。 例 如 ,在 显示 的 银行 系统 交易 列表 中 ,错误 的 交易 金额 会 引起 账 务 问题 ,甚至 导致 法 律 
纠纷 ,应 该 保证 显示 的 内 容 和 数据 库 信 息 是 一 致 的 。 

1) 链接 测试 

链接 是 Web 应 用 系统 的 一 个 主要 特征 , 它 是 在 页 面 之 间 切 换 和 指导 用 户 去 一 些 未 知 地 址 
的 页 面 的 主要 手段 。 链 接 测 试 可 分 为 3 个 方面 。 首 先 ,测试 所 有 链接 是 否 按 规定 的 指示 确实 
链接 到 了 该 链接 的 页 面 ; 其 次 ,测试 所 链接 的 页 面 是 否 存 在 ; 最 后 ,保证 Web 应 用 系统 上 没有 
孤立 的 页 面 ,所 谓 孤 立 页 面 是 指 没有 链接 指向 该 页 面 , 即 只 有 知道 正确 的 URL 地 址 才能 
访问 。 

链接 测试 可 以 自动 进行 ,现在 已 经 有 许多 工具 可 以 采用 。 链 接 测试 必须 在 集成 测试 阶段 
完成 ,也 就 是 说 ,在 整个 Web 应 用 系统 的 所 有 页 面 开发 完成 之 后 进行 链接 测试 。 

链接 测试 比较 复杂 。 比 如 当 网 页 的 结构 非常 复杂 且 数 量 巨大 时 ,其 测试 的 工作 量 会 
很 大 ,应 该 提高 链接 测试 的 速度 。 当 网 络 连 接 总 是 不 稳定 的 时 候 , 误 判 的 频率 会 增加 ,也 
会 导致 工作 量 加 大 。 另 外 ,测试 的 结果 能 和 否 清 晰 地 报告 等 ,这 些 问题 都 提高 了 链接 测试 的 
复杂 度 。 

要 测试 Web 应 用 的 链接 ,可 以 借助 于 自动 化 的 Web 应 用 链接 测试 工具 ,例如 WebCheck、 
Linkbot 和 TestPartner 等 。 这 些 测试 工具 在 测试 过 程 中 自动 扫描 Web 应 用 的 所 有 链接 , 定 
位 及 报告 问题 。 针 对 应 用 中 存在 的 各 种 各 样 的 链接 ,比如 图 片 . 框 架 (Frame)、 插 件 
(Plugin) 背景 .样式 表 (Style Sheet) 、 脚 本 、Java Applet 等 ,以 及 支持 的 连接 种 类 ,比如 
HTTP、FTP、GOPHER 和 HTTPS 等 工具 都 能 够 支持 。 另 外 ,对 本 地 的 链接 和 重 定向 的 链 
接 也 能 很 好 地 支持 。 例 如 WebCheck 能 够 定位 约 50 个 的 问题 类 型 ,并且 提供 19 个 HTML 
格式 的 报告 。 

利用 自动 化 测试 工具 测试 Web 应 用 的 链接 ,主要 优势 体现 在 以 下 几 个 方面 。 

。 简单 易 用 ; 

。 在 实现 上 采用 多 线程 技术 ,因此 检查 速度 特别 快 ; 

。 对 断 开 的 连接 可 以 再 次 检查 ,避免 误 判 ; 


。 没有 检查 连接 的 数量 限制 ,只 受 系统 资源 的 约束 ; 

。 可 以 分 析 Web 应 用 的 结构 ; 

。 检查 结果 可 以 分 类 查看 ,自动 生成 HTML 格式 的 报告 。 

2) 表单 测试 

当 用 户 通过 表单 提交 信息 的 时 候 都 希望 表单 能 正常 工作 。 如 果 使 用 表单 进行 在 线 注 册 ， 
要 确保 提交 按钮 能 正常 工作 , 当 注 册 完 成 后 应 返回 注册 成 功 的 消息 。 如 果 使 用 表单 收集 配送 
信息 ,应 确保 程序 能 够 正确 处 理 这 些 数 据 。 要 测试 这 些 程序 ,需要 验证 服务 器 能 正确 保存 这 些 
数据 ,而 且 后 台 运 行 的 程序 能 正确 解释 和 使 用 这 些 信息 。 

当 用 户 使 用 表单 进行 用 户 注册 ,登录 、 信 息 提交 等 操作 时 ,必须 测试 提交 操作 的 完整 性 ,以 
校 验 提交 给 服务 器 的 信息 的 正确 性 。 例 如 ,用 户 填写 的 出 生日 期 与 职业 是 否 恰当 ,填写 的 所 属 
省 份 与 所 在 城市 是 否 匹 配 等 。 如 果 使 用 了 默认 值 , 还 要 检验 默认 值 的 正确 性 。 如 果 表 单 只 能 
接受 指定 的 某 些 值 ,也 要 进行 测试 。 例 如 ,只 能 接受 某 些 字 符 , 测 试 时 可 以 跳 过 这 些 字符 ,看 系 
统 是 否 会 报错 。 

(1) 测试 表单 时 涉及 如 下 内 容 。 

@ 添加 : 
Tab 检查 : 考虑 是 否 需 要 设置 Esc。 
回 车 测试 : 需要 做 回 车 设置 的 是 否 已 设置 , 回 车 后 是 否 可 以 正确 处 理 数据 。 
窗 体 大 小 是 否 合适 ,双击 标题 栏 检 查 最 大 最 小 化 是 否 合理 。 
输入 标题 是 否 正确 合理 清晰 。 
必 输 项 输入 检查 : 必 输 项 设置 是 否 可 以 ,提示 是 否 正确 。 
数字 输入 检查 : 最 大 值 .最 小 值 . 负 数 、0、 中 间 值 等 与 列表 是 否 相 互 对 应 ; 当 输 入 最 大 
值 时 ,前 台 显 示 数 据 是 否 正确 不 走 位 。 
列表 数据 间隔 是 否 合理 。 
超 长 字符 输入 检查 : 输入 超 长 字符 (存在 空格 标点 符号 、 回 车 和 不 存在 任何 标点 符号 
的 中 英文 段落 ) ,前 后 台数 据 显 示 是 否 正确 不 走 位 。 
输入 框 输入 长 度 控 制 方式 统一 : 超 长 提示 / 超 长 不 可 输入 / 超 长 截 掉 部 分 保存 。 
后 台 文本 框 输入 描述 等 ,书写 格式 是 否 正确 ,如 可 以 段 前 空格 /分 段 , 可 以 自动 换行 。 
中 文 简 / 繁 体 /英文 /特殊 字符 /空格 输入 检查 。 
格式 检测 ,包括 电话 号 码 .电子 邮件 .图片 格式 .MSN 网 页 (主页 ) .邮政 编码 。 测 试 严 
格 程度 : A 一 一 严格 按照 格式 输入 ; B 不 需要 严格 按 格式 ,但 是 要 求 输入 正确 ,如 
不 可 以 输入 数字 则 不 允许 输入 中 文 等 。 
ID 输入 检查 : 输入 相同 ID( 前 /后 空格 ) ,不 同 ID .大 小 写 ID .特殊 字符 ID 等 。 
在 表单 中 的 各 项 应 按 要 求 填写 资料 ,保存 ,检查 表单 是 否 可 以 正常 保存 ; 检测 存在 的 
view 窗 体 时 ,主要 信息 与 输入 是 否 一 致 。 
检查 表单 列表 中 数据 显示 是 否 与 表单 信息 一 致 。 
不 按 表 单 中 各 项 要 求 填写 数据 .是 否 可 以 保存 。 
表单 中 是 否 存在 与 其 他 页 面 显示 数据 相关 联 的 项 目 。 存 在 则 检查 ,设置 与 实际 是 否 
对 应 。 
浏览 .处 理 后 的 资料 、 页 面 是 否 需要 改变 颜色 。 
新 增加 的 资料 在 列表 中 的 排列 是 否 合理 。 


当 列 表 数 据 超 过 一 页 时 ,页 脚 是 否 显示 正确 格式 页 数 ,已 翻 页 和 当前 页 是 否 有 明确 标 
示 ( 页 数 变化 或 者 不 同 颜色 显示 ) 。 

逻辑 检查 。 

上 传 、 下 载 文 件 可 以 正常 显示 、 打 开 , 上 传 文件 格式 是 否 限制 (格式 、 大 小 ) ,提示 明显 。 
是 否 支 持 常 用 快捷 键 Ctrl 十 C/V 、Backspace 等 ,不 允许 输入 的 字符 是 否 做 了 限制 。 
相关 性 检查 ,删除 .增加 某 项 ,是 否 会 对 其 他 项 目 产生 影响 ,影响 是 否 正 常 (注意 : 父 目 
录 、 子 目录 ,数据 项 之 间 相 关 密 切 , 并 经 常 产生 问题 )。 

提交 同一 条 数据 ,Back 后 再 一 次 提交 ,是 否 正常 ,Back 多 次 是 否 会 出 错 。 

@ 编辑 : 

。 修改 数据 库 后 ,保存 ,检查 修改 数据 库 是 否 被 保存 。 

。 再 次 打开 新 添加 数据 ,不 做 任何 修改 并 保存 ,数据 是 否 被 正确 保存 。 

。 修改 数据 后 ,放弃 ,检查 数据 是 否 被 保存 。 

。 修改 数据 后 ,打印 报表 ,核对 是 否 为 修改 后 的 数据 。 

。 将 关键 字 修 改 为 与 其 他 关键 字 相 同 是 否 可 以 保存 。 

@ 删除 : 

。 删除 是 否 有 提示 。 是 否 合理 。 

。 删除 之 后 的 焦点 跳 转 是 否 合理 。 

。 确定 数据 界面 及 数据 库 是 否 已 经 删除 数据 (注意 连带 删除 项 目 ) 。 

。 删除 数据 提示 选择 * 否 ”时 ,数据 是 否 没有 被 删除 。 

(2) 表单 测试 用 例 设计 。 

表单 用 例 设计 归纳 。 

。 输入 系统 支持 的 数据 格式 的 测试 用 例 分 析 。 


众 变量 类 型 (如 int/1ong/ double/1ong 等 ) 
W 变量 | 个 变量 大 小 (如 大 于 250 字 符 ) 
个 变量 精度 (如 double/1ong/decimal 等 ) 


W 长 度 


YW 数组 


人 一 般 符 号 (如 “,&,% 等 ) 
人 空格 (Space) 

人 空 值 符 (不 输入 直接 单 击 确认 ) 
个 字符 昌 组 合 


人 A 数据 库 (各 select/and/if) 


W 关键 字 /| 个 程序 (如 if/switch/ goto) 
人 A 转 义 符 ( 各 &anp/&gt) 


全 插入 Word 符 号 


W 特殊 字符 上 个 超 文本 标记 语言 <table> 
A Css Cdiv#id) 


。 输入 非 系统 支持 的 数据 格式 的 测试 用 例 分 析 


人 超过 边界 值 (如 大 于 250 字 符 ， 小 于 0 字符 ) 


YY = 人 临界 信和 分 析 (如 等 于 249/250 字 符 ，0/1 字 符 ) 


信条 入 字符 届 长 度 


从 簿 入 退 格 、 回 车 字 符 (如 /t /end) 
从 簿 入 转 义 字符 (如 kgt kanp 等 ) 
人 征 入 hs 转 义 的 字符 (分类: ) 

人 输入 关键 字 (如 数据 库 ，select :程序 ，useing systen; 超 文本 标记 : 《td><table>《p) 等 ) 


内 输入 非 系统 支持 数据 格式 | W 输入 字符 下 验证 


人 A 路 季 判 定 模 关 法 分 析 (详情 见 Excell) 


。 覆盖 测试 用 例 分 析 
下 面 以 一 个 TextArea 域 为 例子 ,使 用 Excel 计算 路 径 覆 盖 测 试点 ,最 终 产生 完全 覆盖 表 
单 的 用 例 。 


al | 2 | al|am%lm5|a% | ar | 
se | 
| 组 合 答 和 (EMC | 
输入 数字 C10 个) 
输入 一 般 符号 (~~ 到 $) 


输入 一 般 符号 (~ 到 ) 
输入 Space 空 格 


(Cdiv id=##></div>) 
(ctitle> /title>) 
(goto if case) 


I 八 丰 入 tt 
往 入 输入 为 裤 
输入 转 义 字符 (&gt、&anp) 


(Cdiv id##>C/div>) 
<title> /title>) 
to if case) 


a | |= I 


合共 入 值 验 证 (4) 


字 (select and top) 
六 合计 


字 (select and top) 
直言 (<table><td><tr)) 
(Cdiv id=##>¢/div>) 
i (title> /title>) 


程序 关键 字 (goto if case) 


al | 2 


3) cookies 测试 

cookies 通常 用 来 存储 用 户 信息 和 存储 用 户 在 某 应 用 系统 的 操作 。 当 一 个 用 户 使 用 
cookies 访问 了 某 一 个 应 用 系统 时 , Web 服务 器 将 发 送 关 于 用 户 的 信息 ,把 该 信息 以 cookies 
的 形式 存储 在 客户 端 计算 机 上 ,这 可 用 来 创建 动态 和 自 定义 页 面 或 者 存储 登录 等 信息 。 

如 果 Web 应 用 系统 使 用 了 cookies ,就 必须 检查 cookies 是 否 能 正常 工作 。 测 试 的 内 容 可 
包括 cookies 是 否 起 作用 ,是 否 按 预定 的 时 间 进 行 保存 ,刷新 对 cookies 有 什么 影响 等 。 如 果 
在 cookies 中 保存 了 注册 信息 ,确认 该 cookie 能 够 正常 工作 而 且 已 对 这 些 信息 加 密 。 如 果 使 
用 cookies 来 统计 次 数 , 需 要 验证 次 数 累 计 正 确 。 

(1) 检测 cookies。 

如 果 Web 系统 需要 测试 cookies, 那 么 将 怎样 测试 呢 ? 如 果 有 相关 的 网 站 设计 文档 和 功 
能 文档 等 ,首先 读 这 些 文档 。 但 大 多 数 情 况 下 ,特别 是 缺乏 这 些 文档 的 时 候 ,以 下 方法 是 非常 
有 用 的 : 

。 找到 PC 中 的 cookies 储存 目录 。 

。 删除 所 有 存在 的 cookies。 


。 设置 浏览 器 选项 “提示 cookies”。 在 IE 中 选择 "工具 ”一 "IE 选项 ”>“ 安 全 ”一 “ 自 定义 

级 别 ” 命 令 ,选择 Allow cookies that are stored on your computer 和 Allow per-session 
cookie(not stored) 中 的 Enable 单 选 按钮 。 如 图 9-3 所 示 。 

在 Netscape 中 选择 “编辑 ”一 “参数 选择 ”一 “高 级 选择 ”命令 , 选 


选中 Warn me before 
acceping a cookie 复 选 框 。 如 图 9-4 所 示 。 


Security Settings ?Ix 


Settings: 


ee et mr em 


8 rd 加 


Accept ory cookies that get sent back lo the originaling server 
8 em 二 ac 
这 5 enn para weeepin scoonid 
3 Downlo: 
i de ed 


图 9-3 在 浏览 器 选项 中 设置 Cookies 图 9-4 。 Netscape 中 Cookies 的 设置 
在 Firefox 中 选择 “工具 ”一 “选项 ”一 “隐私 ”命令 ,在 Cookies 选项 区 域 中 选择 “接受 站 点 

的 cookie” 复 选 框 和 “接受 第 三 方 cookie" 复 选 框 ,在 “保存 ,直到 : "下拉 列 表 中 选择 “每 次 均 询 

问 ? 选 项 。 如 图 9-5 所 示 。 

。 地 址 栏 通过 网 站 上 所 有 主要 特征 和 功能 来 查询 cookie 路 径 。 


。 怎样 知道 cookie 路 径 ? 当 网 站 试图 记录 状态 信息 到 PC 的 cookie 中 ,将 得 到 一 个 提示 
信息 ,IE 提示 如 图 9-6 所 示 。 


Security Alert 3 


局 


了 To provide smore personaized browsing experience, vel you alow 
疗 this Web she to save a smal fle [caled 3 cookie) on your 
compuer? The fle con ony be used by this Web sle 


三 和 
口 Ll Ea 氏 售 和 县 3 [Inthe future, do not show this waming 
主要 。 标签 式 浏 师 。 内 容 。 应 用 程序 安全 。 高级 
[c= ww | ww 
回 保存 我 的 访问 历史 ,至 少 di) | 9 加 天 
回 记 住 我 在 表单 和 搜索 栏 中 输入 的 内 容 E) 上 
回 记 住 已 下 载 内 容 @) Ee 
Cookies Expees [Fi Ju 20 2007 080000 Secue no 
例外 四) Daa foz15469072641707 
coi GD) 十 


图 9-5 ”Firefox 中 cookies 的 设置 9-6 IE 安全 提示 


NS 的 提示 如 图 9-7 所 示 。 


。 每 次 这 个 对 话 框 出 现时 .都 会 记录 cookie 的 详细 信息 和 什么 操作 引起 cookie 被 创建 
或 修改 。 那 么 单 击 Yes 接受 cookie。 打 开 cookie 文件 ,复制 /粘贴 cookie 详细 信息 到 


cookie log 中 ,用 于 之 后 的 观察 和 分 析 。 保 留 这 些 数据 ,包括 cookie 名 字 、 数 量 和 创建 
cookie 活动 日 志 相 关联 的 活动 。 注 意 : 一 些 网 页 pm 
的 cookie 是 非常 活跃 的 ,需要 设置 或 者 修改 访问 @ 


server WW.amazon,com:60 
‘Wishes to set a cookse thak wl be senk 


的 每 一 个 网 页 的 cookies。 创 建 一 个 网 站 不 同类 Pe a ee 
型 的 cookie log 将 花费 很 长 的 时 间 , 并 且 会 使 测试 This cookie wll persit unt Thu 2d 05 04:02:07 2001 
人 员 产 生 烦 躁 情绪 。 最 好 的 选择 是 首先 从 开发 人 sh 


员 那 里 得 到 尽 可 能 多 的 cookie 活动 。 下 面 以 | 
amazon. com 网 站 为 例 来 分 析 cookie, 并 以 此 为 例 
进行 cookie 的 测试 实践 。 
(2) amazon. com 对 cookie 的 使 用 。 
现在 通过 amazon. com 怎样 使 用 cookie 来 明确 已 经 讨论 的 cookie 的 概念 。 在 分 析 之 前 ， 
会 遇 到 在 cookie 测试 中 一 个 普遍 的 问题 , 即 搞 清楚 cookie 字段 的 意义 。 在 开始 之 前 , 先 删除 
储存 在 PC 中 的 所 有 Ns cookies ,并且 设置 cookie 选项 来 提醒 。 接 下 来 输入 www. amazon. 
com 到 地 址 栏 ,amazon 服务 器 创建 的 第 一 个 cookie 活动 信息 是 amazon. com TRUE/FALSE 
994320128 session-id 102-7224116-8052958, 这 个 信息 表明 cookie 将 于 7/5/2001 过 期 。 
amazon 服务 器 创建 的 第 二 个 cookie 活动 信息 也 表明 7/5/2001 过 期 : amazon. com TRUE/ 
FALSE 994320181 session-id-time 994320000。amazon 服务 器 的 第 三 个 cookie 内 容 为 
amazon. com TRUE/FALSE 2082787330 ubid-main 077-4356846-2652328 ,过 期 时 间 为 1/1/ 
2036: 第 四 个 cookie 是 一 个 per-session cookie, 由 于 NS 的 提示 并 没有 包含 过 期 时 间 , 因 此 
per-session cookie 也 没有 写 人 到 硬盘 中 。 解 释 这 个 cookie 也 只 能 通过 NS 的 提示 对 话 框 了 ， 
如 图 9-8 所 示 。 


图 9-7 NS 安全 提示 


FY) The server www.amazon.com 
7) Wishas to set a cookie that wil be senk 


Do you wish to aliow the cooke to be set? 


[ms I | 
图 9-8 解释 cookie 提示 框 


第 五 个 cookie 过 期 时 间 为 1/1/2036, 包 含 以 下 数据 : . amazon. com TRUE/FALSE 
2082787787 x-main hQFiIxHUFj8mCscT @ Yb527xsVsOFQjBf。 在 接受 完 第 五 个 cookie， 
amazon. com 主页 也 加 载 完 了 ,URL 是 http://www. amazon. com/exec/obidos/subst/home/ 
home. html/102-7224116-8052958。 可 以 看 到 在 URL 末尾 是 一 串 数字 ,这 是 一 个 session ID， 
储存 在 第 一 个 cookie 中 。 第 六 个 cookie 的 过 期 时 间 为 6/29/2001, 内 容 为 www. amazon. com 
FALSE / FALSE 993797034 seenpop 1。 当 正在 接收 上 面 的 cookie 时 ,第 二 个 浏览 器 对 话 框 
将 会 弹出 一 个 免费 购物 信息 提示 。 人 逻辑 猜测 这 个 cookie 的 目的 是 追踪 是 否 看 过 这 个 广告 信 
息 。 当 所 有 的 cookie 都 被 设置 时 ,Ns cookie. txt 文本 内 容 如 图 9-9 所 示 。 

为 什么 这 里 只 有 5 个 cookies 在 文本 中 ? 因为 per-session cookies 只 保存 在 内 存 中 ,并 没 
有 写 入 cookie. txt 文件 中 。 


jes.tyt - Notepad 
Se Edt_ Fomat Heip 
Netscape HTTP Cookie File 


Petp i ww. net Scape con/nevsref/std/cookie_spec.htnl 
This 15 a generared fils! Do not edit. 


,amazon. Com TRUE 了 FALSE 994320128 session-id 102-7224116-B052958 

amazon. com TRUE / FALSE 994320181 seassion-id-time 0994320000 

,amazon. Com TRUE / FALSE 2082787330 ubid-main Q77-4356846-2652328 

,amazon. CoOm TRUE 了 FALSE 。 2082787787 x-main hoFiIxHUFjSmCscTG@Yb5Z7xsVsOFQjBT 
amazon.com FALSE / FALSE 。 993797034 Secnpop 1 


图 9-9 cookie. txt 文本 内 容 


(3) cookie 内 容 和 结构 分 析 。 

在 分 析 所 有 amazon. com 设置 的 cookie 时 ,让 我 们 快速 查看 一 下 cookie 的 结构 和 每 个 字 
段 的 意思 。 第 一 个 cookie 是 amazon. com TRUE/FALSE 994320128 session-id 102-7224116- 
8052958 ,使 用 www. cookiecentral. com 的 信息 ,将 cookie 分 解 成 不 同 的 字段 。 

。 amazon. com 用 于 验证 域名 的 cookie, 只 是 机 器 设置 的 cookie, 让 amazon. com 域名 能 

够 读 到 这 个 cookie( 然 而 ,这 也 是 一 个 bug, Web 浏览 器 对 cookie 执行 后 将 允许 未 授权 
的 网 页 通过 先前 的 cookie 访问 ) 。 

。 TRUE 是 一 个 标记 ,表明 是 否 所 有 在 域名 内 的 机 器 能 够 访问 这 个 cookie。 

。 /是 cookie 路 径 验证 。 

。 FALSE 是 一 个 安全 标记 ,表明 是 否 有 一 个 安全 连接 需要 访问 这 个 cookies。 

。 994320128 是 UNIX 的 cookie 过 期 时 间 (UNIX 时 间 是 自 1970 年 1 月 1 日 00:00:00 

格林 威 治标 准时 间 的 秒 数 ) 。 

。 session-id 是 被 cookie 储存 的 变量 名 。 

。 102-7224116-8052958 是 变量 值 。 

(4) amazon. com 网 站 cookie 分 析 。 

访问 amazon. com 主页 产生 了 6 个 cookies, 即 1 个 per-session cookie 和 5 个 持久 
cookies。 由 于 网 站 设计 文档 和 开发 人 员 都 不 能 告诉 关于 cookie 的 含义 ,因此 将 它们 放 入 表 
格 ,如 表 9-1 所 示 , 以 便于 破解 cookie 数据 的 意义 。 只 考虑 前 面 5 个 cookies, 以 此 可 以 判断 第 
六 个 cookie 的 目的 。 


表 9-1 Cookies 含义 分 析 表 


accessible secure 
cookie# domain by all path connection expiration name value 
machines needed 
A 102-7224116- 
1 . amazon. com TRUE * FALSE 994320128 | session-id 8052958 
2 |.amazon.com | TRUE 天 FALSE | 994320181 | ssS on 994320000 
id-time 
077- 
3 . amazon. com TRUE - FALSE 2082787330 | ubid-main 4356846- 
2652328 
4 | :amazon com | TRUE / FALSE | ‘Persession | tigos, path | (aeeabove) 
cookie) 
hQFiIxHU 
5 “| .amazon com | TRUE / FALSE | 2082787787 | xmain CE 
Yb5z7xs 
VsOFQjBf 


第 一 个 cookie 是 一 个 session ID 分 配给 的 订单 session。 这 里 的 主要 内 容 是 变量 名 
session-id。 另 一 个 关键 是 变量 值 102-7224116-8052958 ,能 够 在 主页 的 URL 末尾 看 到 ,在 第 
五 个 cookie 设置 后 可 以 在 主页 的 URL 的 末尾 看 到 ,www. amazon. com/…/home. html/102- 
7224116-8052958cookie 1, 有 效 期 为 7/5/2001 ,在 cookie 设置 之 前 可 以 通过 NS 的 警告 对 话 框 
看 到 ,所 以 cookie 中 UNIX 过 期 时 间 994320125 等 于 7/5/2001 (cookies 过 期 时 间 王 1970 十 
994320125/(365X24X 60 X 60))。 第 二 个 cookie 的 目的 并 不 明显 ,基于 名 字 和 值 分 别 为 
session-id-time 和 99432000 ,猜测 可 能 是 本 机 UNIX 访问 amazon. com 网 站 的 session 最 大 结 
东 时 间 。 因 为 从 NS 的 提示 框 知道 cookie 将 于 7/5/2001 过 期 ,所 以 推测 994320181 的 过 期 值 
等 于 7/5/2001。 为 什么 ? 这 里 只 有 两 个 UNIX 值 994320181-994320000 王 181 约 为 3min。 第 
三 个 和 第 五 个 的 cookie 的 目的 很 难 推测 。Cookie3 和 Cookie5 的 名 字 是 ubid-main 和 x-main， 
并 不 能 让 我 们 立即 理解 。 两 个 cookie 的 过 期 时 间 都 是 2036, 所 有 amazon 对 其 必定 长 久 使 用 。 
第 四 个 cookie 只 是 一 个 per-session/ 没 有 保存 cookie, 包 含 一 个 子 字 符 串 continue-shopping- 
url 的 长 值 。 如 果 从 购物 车 页 面 单 击 ContinueShopping 按钮 ,这 个 cookie 的 值 就 告诉 amazon 
服务 器 在 哪里 送 达 。 

在 测试 之 前 应 该 搞 清 楚 cookie 的 含义 和 使 用 ,可 以 通过 与 开发 人 员 进 行 沟通 或 者 通过 阅 
读 功 能 需求 和 设计 文档 来 更 进一步 得 到 需要 的 信息 。 

(5) 测试 cookie。 

知道 了 什么 是 cookie, 在 Web 系统 中 cookie 是 如 何 来 提供 状态 ,以 及 如 何 进行 cookie 的 
内 容 分 析 , 现 在 来 演示 怎样 通过 使 用 cookie 测试 网 页 。 

@ 禁止 cookie。 

这 是 cookie 测试 中 最 容易 的 一 部 分 。 如 果 所 有 的 cookie 都 禁止 了 ,那么 网 页 会 发 生 什 
么 ? 首先 关闭 所 有 的 浏览 器 窗口 ,删除 PC 中 的 所 有 cookies。 当 cookie 运行 时 ,浏览 器 是 打 
开 的 ,cookie 文件 就 会 存在 。 所 以 必须 关闭 浏览 器 并 删除 cookies ,关闭 浏览 器 也 就 移 除 了 内 
存 中 的 per-sessioncookie。 

禁止 所 有 cookies ,并 且 使 用 网 页 的 主要 特性 和 功能 。 大 多 数 时 间 ,都 将 发 现 cookies 不 能 
工作 ,因为 cookie 已 经 禁止 了 。 这 并 不 是 bug, 但 是 无 法 更 改 的 事实 是 在 网 页 上 禁止 cookie 
就 使 要 求 使 用 cookie 的 网 页 功能 受到 禁止 。 随 着 cookie 的 禁止 ,测试 工作 也 会 变 少 。 网 站 的 
用 户 是 否 很 明显 必须 有 cookie 才能 使 用 网 站 呢 ? 服务 器 试图 设置 一 个 cookie 也 会 失败 吗 ? 
如 果 是 ,那么 送 达 网 页 一 个 用 户 状态 ,cookie 必须 能 使 网 站 工作 吗 ? 或 者 试图 在 运行 多 次 相同 
的 操作 后 用 户 会 非常 诅 丧 ,为 什么 网 站 不 能 工作 了 ? 

amazon. com 已 经 成 功 通过 测试 。 能 够 使 用 网 站 的 所 有 功能 ,如 搜索 .购物 车 检验 功能 ， 
即使 Cookie 完全 禁止 。 而 且 状 态 维持 是 服务 器 所 关心 的 ,其 维持 是 基于 主页 URL 末尾 的 
session-id。 现 在 来 测试 这 个 假设 。 主 页 URL 是 www. amazon. com/…/home. html/104- 
0274809-0482344, 如 果 改 变 最 右边 的 数字 从 4 到 5, 重 新 请 求 URL, Amazon 会 丢弃 编辑 的 
URL, 通 过 创建 一 个 带 有 新 的 session-id 的 URL, 从 中 断 的 情况 下 恢复 URL 为 www. 
amazon. com/…/home. html/107-0357560-1728507。 所 以 ,出 现 了 假设 的 正确 性 。 再 进一步 ， 
在 amazon 的 主页 选择 Yamaha CD-ROM kit, 并 且 增加 到 我 的 购物 车 。 购 物 车 页 面 的 URL 
是 www. amazon. com/…/one-click-thank-youconfirm/107-0357560-1728507。 改 变 最 右边 的 
数字 从 7 到 8 ,然后 回 车 编辑 后 的 URL ,丢失 了 我 的 购物 车 ,并 且 返 回 了 一 个 错误 页 面 ,这 进 一 
步 支 持 了 先前 的 假设 服务 器 端 状态 是 通过 URL 中 一 个 Session ID 来 维持 的 。 


即使 用 户 禁 止 了 cookie, 服 务 器 端的 状态 维持 仍然 允许 在 amazon. com 购物 ,这 是 一 个 巧 
妙 的 设计 。 如 果 cookie 可 用 ,可 以 看 到 先前 amazon 设置 的 session ID Cookie 会 认识 Session 
ID。 为 什么 ? 如 果 离 开 一 个 非 空 购物 车 的 页 面 ,然后 返回 ,Session ID 的 Cookie 可 以 被 用 于 
重新 获取 先前 的 订购 session 和 购物 车 状态 。 

@ 有 选择 性 地 拒绝 部 分 cookies。 

如 果 一 些 cookie 被 接受 ,而 一 些 cookie 被 拒绝 ,那么 网 站 会 发 生 什 么 事情 呢 ? 首先 删除 
PC 上 的 所 有 cookie, 包 括 测试 的 网 站 和 浏览 器 cookie 选项 提示 ,然后 进行 网 站 的 主要 功能 操 
作 。 当 网 站 每 次 设置 Cookie 时 ,将 会 被 提示 。 那 么 接受 一 些 ,拒绝 一 些 ( 首 先 分 析 网 站 对 于 
cookie 的 使 用 ,起 草 一 个 关于 接受 /拒绝 cookie 的 测试 计划 )。 在 部 分 cookie 被 拒绝 后 ,网 站 
是 怎样 停顿 的 ? 基于 上 面 所 述 , Web 服务 器 会 检测 某 些 被 拒绝 的 cookie, 会 做 出 适当 的 提示 
吗 ? 或 者 ,网 站 会 出 现 故障 ,事故 ,损坏 数据 等 其 他 不 正当 的 方式 吗 ? 

让 我 们 来 制定 关于 部 分 cookie 被 拒绝 的 测试 策略 来 测试 amazon. com 主页 。 每 个 测试 用 
例 都 将 要 求 6 个 cookie 既 有 接受 也 有 被 拒绝 的 情况 ,所 以 有 2° 二 64 种 测试 用 例 。 测 试用 例 的 
一 个 子 集 如 表 9-2 所 示 。 


表 9-2 测试 用 例子 集 列表 


cookie 1 cookie 2 cookie 3 cookie 4 cookie 5 cookie 6 
测试 号 (persistent) | (persistent) | (persistent) | (persistent) | (persistent) (persistent) 
1 Reject Reject Reject Reject Reject Reject 
2 Reject Reject Reject Reject Reject Accept 
3 Reject Reject Reject Reject Accept Reject 
4 Reject Reject Reject Reject Accept Accept 
5 Reject Reject Reject Accept Accept Accept 
64 Accept Accept Accept Accept Accept Accept 


例如 ,如 果 执 行 第 五 个 测试 用 例 , 当 访 问 amazon. com 时 ,拒绝 了 前 面 3 个 cookies, 但 是 
接受 了 第 四 、 第 五 .第 六 个 cookies。 第 一 个 测试 用 例 等 于 是 之 前 执行 的 禁止 cookie 测试 ,但 是 
仍然 保留 了 这 个 测试 用 例 。 如 果 把 接受 和 拒绝 用 二 进 制 的 形式 表示 为 0 和 1, 表 9-2 实现 了 包 
括 0 一 63 在 内 的 十 进 制 到 二 进 制 的 转换 。 

禁止 cookie 时 对 于 amazon. com 测试 执行 的 影响 将 通过 cookie 被 拒绝 的 测试 用 例 来 进 
行 测试 。 执 行 第 二 和 第 五 个 测试 用 例 , 关 闭 浏览 器 ,并 删除 了 所 有 的 Cookies。 用 例 执行 完 
后 ,网 站 的 主要 功能 可 以 正常 使 用 ,并 且 没 有 任何 问题 。 所 以 网 站 的 设计 者 已 考虑 了 cookie 
的 问题 ,使 得 顾客 能 够 在 amazon. com 上 购物 不 受 任何 影响 。 

以 上 的 测试 用 例 只 处 理 了 amazon. com 第 一 次 被 创建 时 接受 或 拒绝 cookie 时 的 测试 用 
例 。 也 应 该 测试 接受 和 拒绝 对 cookies 的 修改 ,以 上 的 cookie 只 是 一 个 初始 化 的 设置 。 如 果 
服务 器 企图 频繁 修改 cookie, 不 接受 这 个 改变 ,维持 旧 的 cookie 的 值 ,那么 会 发 生 什么 情况 ? 

@ 破坏 cookies。 

现在 执行 网 站 的 主要 功能 ,通过 这 种 方式 来 创建 和 修改 cookies, 可 以 试 着 这 样 做 : 

。 改变 持久 cookie 数据 (由 于 Per-Session Cookie 只 被 存储 在 内 存 ,它们 不 能 被 编辑 。 不 
过 可 以 通过 工具 来 破坏 这 些 Per-Session Cookies, 但 是 可 能 开始 并 没有 意识 到 )。 例 
如 ,在 第 一 个 cookie 被 写 时 ,改变 session id 的 变量 名 ,如 改 成 ses-ID 或 者 Sexqion- 


ID。 记 住 ,必须 关闭 浏览 器 来 编辑 这 些 cookies。 在 编辑 之 前 ,如 果 访 问 了 Amazon 网 
站 ,关闭 浏览 器 ,重启 浏览 器 ,然后 返回 amazon. com, 将 返回 之 前 的 session 维持 的 , 基 
于 cookie 中 的 session-id。 但 是 ,如 果 破 坏 session-id 的 变量 名 , Amazon 会 检测 破坏 
的 变量 名 和 复原 被 丢弃 的 6 个 cookie, 并 重新 创建 新 的 变量 。 在 编辑 cookie 之 后 , 重 
新 启动 浏览 器 ,加 载 /继续 使 用 该 网 站 。 那 么 破坏 的 cookie 会 引起 网 站 故障 吗 ? 会 引 
起 数据 丢失 或 数据 库 故障 吗 ? 第 二 个 例子 : 改变 session-ID 的 数据 值 ,在 最 右边 的 数 
字 中 加 1,102-7224116-8052958 变 成 102-7224116-8052959。 现 在 是 不 是 看 到 了 其 他 
人 的 购物 session 了 ? 是 否 有 任何 丢失 或 数据 库 故障 ? 

删除 部 分 cookies。 在 该 网 站 上 执行 更 多 的 操作 ,然后 删除 这 些 Cookie。 继 续 使 用 该 
网 站 ,会 发 生 什么 ? 它 容易 修复 吗 ? 会 有 数据 丢失 或 数据 库 故 障 吗 ? 

@ cookie 加 密 。 

最 后 一 个 cookie 测试 很 简单 。 当 在 测试 网 站 上 调用 cookie 使 用 时 ,应 该 特别 注意 cookie 
数据 的 含义 。 一 些 敏 感 信息 比如 用 户 名 和 密码 都 不 应 该 储存 在 文本 中 ,以 至 于 让 其 他 人 读 到 。 
在 送 到 PC 时 ,这 些 数据 应 该 被 加 密 。 这 个 很 明显 的 规则 很 容易 被 忽略 。 这 个 用 例 能 够 确定 
某 些 敏感 数据 类 型 ,例如 信用 卡号 ,即使 加 密 了 ,也 不 应 该 储存 在 cookie 中 。 

基于 上 面 对 amazon. com 的 cookie 分 析 和 测试 ,Amazon 已 经 通过 了 cookie 加 密 测试 , 没 
有 敏感 的 用 户 名 或 信用 卡 信息 存储 在 文本 中 。 这 也 是 黑客 通过 cookie 数据 进入 账户 的 途径 
之 一 。 在 用 户 A 的 机 器 上 打开 了 Amazon 主页 ,并且 订购 一 本 John Adams 的 书 到 他 的 购物 
车 ,从 cookie. txt 文件 中 复制 了 5 个 持久 cookie 粘贴 到 用 户 B 的 机 器 上 。 然 后 在 用 户 B 的 机 
器 上 打开 Amazon 主页 ,用 户 B 的 机 器 上 人 允许 操作 用 户 A 刚才 订购 的 JohnAdam 书 的 购物 
车 。 这 个 实验 进一步 表明 ,只 需要 编辑 用 户 B 与 用 户 A 匹配 的 session-id, 就 能 阻止 用 户 B 来 
访问 用 户 A 的 购物 车 。 这 也 让 我 们 相信 ,使 用 一 个 或 多 个 Cookie 作为 一 个 独特 的 密 匙 可 以 
减少 对 这 类 黑客 人 侵 的 概率 。 

2. 性 能 测试 

Web 应 用 系统 的 性 能 测试 在 9. 5 节 有 详细 分 析 , 这 里 仅仅 从 Web 应 用 系统 的 本 身 特 性 
方面 对 性 能 测试 作 简单 介绍 。 

1) 连接 速度 测试 

用 户 连接 到 Web 应 用 系统 的 速度 根据 上 网 方式 的 变化 而 变化 ,连接 方式 或 许 是 电话 拨 
号 ,或 许 是 宽带 上 网 。 假 如 下 载 一 个 程序 ,用 户 可 能 等 的 时 间 较 长 ,但 如 果 仅 仅 访问 一 个 页 面 ， 
页 面 打 开 的 时 间 比 较 长 ,那么 连接 速度 会 存在 问题 。 如 果 Web 系统 响应 时 间 太 长 (例如 超过 
5s) ,用 户 就 会 因 没有 耐心 等 待 而 离开 。 

另外 ,有 些 页 面 有 超时 的 限制 ,如 果 响 应 速度 太 慢 ,用 户 可 能 还 没 来 得 及 浏览 内 容 就 需要 
重新 登录 了 。 而 且 连 接 速度 太 慢 还 可 能 引起 数据 丢失 ,使 用 户 得 不 到 真实 的 页 面 。 

连接 速度 测试 可 能 会 涉及 内 网 和 外 网 ,测试 时 需要 考虑 Web 应 用 系统 的 具体 环境 和 

2) 负载 压力 测试 

负载 测试 是 为 了 测量 Web 系统 在 某 一 负载 级 别 上 的 性 能 ,以 保证 Web 系统 在 需求 范围 
内 能 正常 工作 。 负 载 级 别 可 以 是 某 个 时 刻 同时 访问 Web 系统 的 用 户 数 量 , 也 可 以 是 在 线 数据 
处 理 的 数量 。 例 如 ,Web 应 用 系统 能 允许 多 少 个 用 户 同时 在 线 ? 如 果 超 过 了 这 个 数量 ,会 出 
现 什 么 现象 ” Web 应 用 系统 能 和 否 处 理 大 量 用 户 对 同一 个 页 面 的 请 求 ? 


负载 测试 应 该 安排 在 Web 系统 发 布 以 后 ,在 实际 的 网 络 环境 中 进行 测试 。 因 为 一 个 企业 
内 部 员工 ,特别 是 项 目 组 人 员 总 是 有 限 的 ,而 一 个 Web 系统 能 同时 处 理 的 请 求 数量 将 远 远 超 
出 这 个 限度 ,所 以 ,一 般 来 说 只 有 放 在 Internet 上 接受 负载 测试 ,其 结果 才 是 正确 可 信 的 。 

进行 压力 测试 是 指 破坏 性 的 测试 一 个 Web 应 用 系统 ,测试 系统 的 反映 。 压 力 测试 是 测试 
系统 的 限制 和 故障 恢复 能 力 ,也 就 是 测试 Web 应 用 系统 会 不 会 崩溃 ,在 什么 情况 下 会 崩溃 。 
黑客 常常 提供 错误 的 数据 负载 ,直到 Web 应 用 系统 崩溃 ,接着 当 系 统 重 新 启动 时 获得 存 取 权 。 

压力 测试 的 区 域 包括 表单 登录 和 其 他 信息 传输 页 面 等 。 

负载 /压力 测试 应 该 关注 什么 ?测试 需要 验证 系统 能 否 在 同一 时 间 响 应 大 量 的 用 户 ,在 用 
户 传送 大 量 数据 的 时 候 能 否 响应 ,系统 能 否 长 时 间 运 行 。 可 访问 性 对 用 户 来 说 是 极其 重要 的 。 
如 果 用 户 得 到 “系统 忙 ”的 信息 ,他 们 可 能 放弃 ,并 转向 竞争 对 手 。 系 统 检 测 不 仅 要 使 用 户 能 够 
正常 访问 站 点 ,在 很 多 情况 下 ,可 能 会 有 黑客 试图 通过 发 送 大 量 数据 包 来 攻击 服务 器 。 出 于 安 
全 的 原因 ,测试 人 员 应 该 知道 当 系 统 过 载 时 需要 采取 哪些 措施 ,而 不 是 简单 地 提升 系统 性 能 。 

(1) 瞬间 访问 高 峰 。 如 果 站 点 用 于 公布 彩票 的 抽奖 结果 ,最 好 使 系统 在 中 奖 号 码 公 布 后 
的 一 段 时 间 内 能 够 响应 上 百 万 的 请 求 。 负 和 载 测试 工具 能 够 模拟 X 个 用 户 同时 访问 测试 站 点 。 

(2) 每 个 用 户 传送 大 量 数据 。 网 上 书店 的 多 数 用 户 可 能 只 订购 1 一 5 本 书 ,但 是 大 学 书店 
可 能 会 订购 5000 本 有 关心 理学 介绍 的 课本 。 或 者 一 个 祖母 为 她 的 50 个 儿孙 购买 春节 礼物 
(当然 ,每 个 孩子 都 有 自己 的 邮件 地 址 )。 系 统 能 处 理 单个 用 户 的 大 量 数据 吗 ? 

(3) 长 时 间 的 使 用 。 如 果 站 点 用 于 处 理 鲜花 订单 ,那么 至 少 希 望 它 在 母亲 节 前 的 一 周 内 
能 持续 运行 。 如 果 站 点 提供 基于 Web 的 E-mail 服务 ,那么 站 点 最 好 能 持续 运行 几 个 月 ,甚至 
几 年 。 一 般 情况 下 需要 使 用 自动 测试 工具 来 完成 这 种 类 型 的 测试 ,因为 很 难 通过 手工 完成 这 
类 测试 。 可 以 组 织 100 个 人 同时 单 击 某 个 站 点 ,但 是 同时 组 织 10 万 个 人 不 太 可 能 。 通 常 ,长 
时 间 地 、 多 次 地 使 用 测试 工具 可 以 创造 效益 ,节约 成 本 。 而 且 测 试 工 具 安 装 完 成 之 后 ,再 次 使 
用 的 时 候 ,只 要 修改 脚本 甚至 直接 运行 原来 的 脚本 就 可 以 了 。 常 用 的 测试 工具 有 WAS、 
loadrunner 等 。 

3. 界面 及 图 形 测试 

界面 测试 在 第 9 章 的 9. 1 节 做 了 详尽 的 阐述 ,这 里 就 Web 系统 界面 的 特点 作 简单 介绍 。 

除了 一 定 的 技术 因素 外 ,Web 系统 的 好 与 坏 取决 于 其 页 面 的 设计 艺术 水 平 。 这 从 另 一 个 
角度 说 明了 Web 系统 的 界面 的 重要 性 。 由 于 Web 系统 的 客户 端 均 采用 浏览 器 ,不 同 用 户 可 
能 会 在 浏览 器 里 设置 不 同 的 显示 方式 ,因此 ,在 界面 测试 的 时 候 尽量 使 用 默认 的 设置 。 开 始 进 
行 界面 测试 以 前 ,需要 重点 调研 两 个 问题 : 

(1) Web 应 用 系统 的 最 终 用 户 群 是 谁 。 

(2) Web 应 用 界面 (大 多 数 等 同 于 网 页 ) 的 设计 策略 是 什么 。 

这 两 个 问题 决定 了 评价 一 个 Web 应 用 系统 界面 采用 什么 样 的 标准 。 尽 管 不 同 的 Web 应 
用 系统 的 界面 千变万化 ,但 其 测试 方法 和 评价 准则 仍 有 一 些 共同 的 内 容 。 下 面 是 界面 测试 中 
需要 重点 关注 的 。 

(1) 页 面 中 各 元 素 布局 的 协调 性 。 

一 个 复杂 的 页 面 会 包含 多 种 元 素 , 如 文字 、 表 单 . 图 片 动画 .表格 和 视频 等 ,从 美学 的 角度 
来 看 ,如 果 只 是 把 所 有 的 Web 应 用 功能 简单 地 堆砌 到 页 面 上 ,其 易 用 性 是 很 差 的 。 需 要 评估 
的 协调 性 包括 以 下 几 个 方面 : 

。 各 元 素 位 置 的 协调 性 ; 


。 各 元 素颜 色 的 协调 性 ; 

。 各 元 素 大 小 比例 的 协调 性 。 

(2) 不 同 页 面 风格 的 统一 性 。 

一 个 统一 的 Web 系统 的 不 同 页 面 应 该 从 颜色 框架、 操作 方式 等 多 个 方面 统一 起 来 。 由 
于 Web 日 益 流 行 ,很 多 人 把 它 看 作 图 形 设 计 作 品 。 人 们 为 了 体现 出 网 页 设计 的 丰富 多 彩 ,在 
不 同 页 面 使 用 很 多 不 同 风格 的 图 片 .特效 , 初 看 觉得 网 页 非常 艳丽 多 彩 , 但 忽略 了 不 同 网 页 的 
协调 统一 。 

(3) 用 户 在 界面 中 操作 的 便利 性 。 

网 页 设计 中 用 得 最 多 的 是 表格 ,而 用 户 操作 最 容易 导致 界面 缺陷 的 也 就 是 表格 ,因此 要 对 
表格 进行 操作 验证 。 例 如 ,需要 验证 表格 是 否 设置 正确 ,用 户 是 否 需要 向 右 滚动 页 面 才能 看 见 
表格 中 的 内 容 ; 每 一 栏 的 宽度 是 否 足 够 宽 , 表 格 里 的 文字 是 否 都 有 折 行 ; 是 否 有 因为 某 一 格 
的 内 容 太 多 ,而 将 整 行 的 内 容 拉 长 等 。 

(4) 界面 动态 操作 测试 。 

主要 测试 以 下 几 个 方面 : 

。 屏幕 分 辩 率 设置 的 影响 ; 

。 浏览 窗口 最 大 化 /最 小 化 的 影响 ; 

。 选 定 目标 元 素 的 置 中 与 缩放 。 

在 这 里 ,图 形 测 试 泛 指 页 面 中 所 有 的 图 片 以 及 彩色 元 素 。 在 Web 应 用 系统 中 ,图 形 占 有 
相当 重要 的 位 置 ,因为 Web 系统 应 用 范围 的 特殊 性 ,图 形 直接 影响 了 用 户 浏 览 和 使 用 Web 系 
统 的 操作 。 

适当 的 图 片 和 动画 既 能 起 到 广告 宣传 的 作用 ,又 能 起 到 美化 页 面 的 功能 。 和 谐 的 颜色 搭 
配 既 能 体现 出 Web 应 用 系统 的 主题 ,也 能 反映 出 业主 企业 的 形象 。Web 应 用 系统 的 图 形 可 
以 包括 图 片 ,动画 .边框 .颜色 .字体 背景、 按钮 ,在 进行 图 形 测试 时 重点 进行 以 下 测试 : 

(1) 验证 所 有 的 图 形 是 否 有 明确 的 用 途 。 特 别 是 图 片 或 动画 ,有 无 堆砌 的 现象 ,因为 过 于 
集中 的 图 片 既 浪 费 传输 时 间 , 又 影响 视觉 效果 。 

(2) 验证 所 有 页 面 字 体 的 颜色 、 风 格 是 否 一 致 。 字 体 的 颜色 与 页 面 的 主 色调 是 否 协调 。 

(3) 背景 颜色 与 字体 颜色 和 前 景 颜色 是 否 搭 配 。 

(4) 确认 图 片 的 大 小 和 质量 。 这 也 是 一 个 很 重要 的 因素 ,图 片 是 否 采用 JPG 或 GIF 。 

(5) 压缩 图片 尺寸 是 否 合适 ,分 辨 率 是 否 满足 需求 等 都 需要 进行 评价 。 

4. 兼容 性 测试 

1) 平台 测试 

市 场 上 有 很 多 不 同 的 操作 系统 类 型 ,最 常见 的 有 Windows、UNIX、Macintosh 和 Linux 
等 。Web 应 用 系统 的 最 终 用 户 究竟 使 用 哪 一 种 操作 系统 取决 于 用 户 系 统 的 配置 。 这 样 就 可 
能 会 发 生 羔 容 性 问题 ,同一 个 应 用 可 能 在 某 些 操作 系统 下 能 正常 运行 ,但 在 另外 的 操作 系统 下 
可 能 会 运行 失败 。 

因此 ,在 Web 系统 发 布 之 前 ,需要 在 各 种 操作 系统 下 对 Web 系统 进行 兼容 性 测试 。 

2) 浏览 器 测试 

浏览 器 是 Web 客户 端 最 核心 的 构件 ,来 自 不 同 厂 商 的 浏览 器 对 Java、Javascript、 ActiveX、 
plug-ins 或 不 同 的 HTML 规格 有 不 同 的 支持 。 例 如 , ActiveX 是 Microsoft 的 产品 ,是 为 
Internet Explorer 而 设计 的 ,Javascript 是 Netscape 的 产品 ,Java 是 Sun 的 产品 等 。 另 外 , 框 


架 和 层次 结构 风格 在 不 同 的 浏览 器 中 也 有 不 同 的 显示 ,甚至 根本 不 显示 。 不 同 的 浏览 器 对 安 
全 性 和 Java 的 设置 也 不 一 样 。 

测试 浏览 器 兼容 性 的 一 个 方法 是 创建 一 个 兼容 性 矩阵 。 在 这 个 矩阵 中 ,测试 不 同 厂商 、 不 
同 版 本 的 浏览 器 对 某 些 构件 和 设置 的 适应 性 。 

3) 分 辨 率 测试 

页 面 版 式 在 640X400、600X800 或 1024X768 的 分 辨 率 模 式 下 是 否 显示 正常 ? 字体 是 否 
太 小 以 至 于 无 法 浏览 ? 或 者 是 太 大 ? 文本 和 图 片 是 否 对 齐 ? 

4) Modem/ 连 接 速 率 

是 否 有 这 种 情况 ,用 户 使 用 28. 8 Modem 下 载 一 个 页 面 需要 10min, 但 测试 人 员 在 测试 的 
时 候 使 用 的 是 T1 专线 ?用 户 在 下 载 文章 或 演示 的 时 候 ,可 能 会 等 待 比较 长 的 时 间 , 但 却 不 会 
耐心 等 待 首页 的 出 现 。 最 后 ,需要 确认 图 片 不 会 太 大 。 

5) 打印 机 

用 户 可 能 会 将 网 页 打印 下 来 ,因此 网 页 在 设计 的 时 候 要 考虑 到 打印 问题 ,注意 节约 纸张 和 
油墨 。 有 不 少 用 户 喜欢 阅读 而 不 是 盯 着 屏幕 ,因此 需要 验证 网 页 打印 是 否 正常 。 有 时 在 屏幕 
上 显示 的 图 片 和 文本 的 对 齐 方式 可 能 与 打印 出 来 的 东西 不 一 样 ,测试 人 员 至 少 需要 验证 订单 
确认 页 面 打 印 是 正常 的 。 

6) 组 合 测试 

最 后 需要 进行 组 合 测试 。600X 800 的 分 辨 率 在 MAC 机 上 可 能 不 错 ,但 是 在 IBM 兼容 机 
上 却 很 难看 。 在 IBM 机 器 上 使 用 Netscape 能 正常 显示 ,但 却 无 法 使 用 Lynx 来 浏览 。 如 果 是 
内 部 使 用 的 Web 站 点 ,测试 可 能 会 轻松 一 些 。 如 果 公 司 指定 使 用 某 个 类 型 的 浏览 器 ,那么 只 
需 在 该 浏览 器 上 进行 测试 。 如 果 所 有 的 人 都 使 用 Tl 专线 ,可 能 不 需要 测试 下 载 施加 (但 需要 
注意 的 是 ,可 能 会 有 员工 从 家 里 拨号 进入 系统 )。 有 些 内 部 应 用 程序 ,开发 部 门 可 能 在 系统 需 
求 中 声明 不 支持 某 些 系统 而 只 支持 一 些 指 定 的 系统 。 但 是 ,理想 的 情况 是 系统 能 在 所 有 机 器 
上 运行 ,这 样 就 不 会 限制 将 来 的 发 展 和 变动 。 根 据 实际 情况 ,可 以 采取 等 价 划分 的 方法 , 列 出 
兼容 性 矩阵 进行 测试 。 

5. 安全 测试 

即使 站 点 不 是 金融 类 的 系统 .安全 问题 也 是 非常 重要 的 。Web 站 点 收集 的 用 户 资料 只 能 
在 公司 内 部 使 用 。 如 果 用 户 信 息 被 黑客 泄露 ,客户 在 进行 交易 时 就 不 会 有 安全 感 。 

1) 目录 设置 

Web 安全 的 第 一 步 就 是 正确 设置 目录 。 每 个 目录 下 应 该 有 index. html 或 main. html 页 
面 ,这 样 就 不 会 显示 该 目录 下 的 所 有 内 容 。 例 如 ,一 个 公司 没有 执行 这 条 规则 。 选 中 一 幅 图 
片 , 单 击 鼠标 右键 ,找到 该 图 片 所 在 的 路 径 *…com/objects/images”。 然 后 在 浏览 器 地 址 栏 中 
手工 输入 该 路 径 ,发 现 该 站 点 所 有 图 片 的 列表 。 这 可 能 没什么 关系 。 但 进入 下 一 级 目录 “… 
com/objects”, 单 击 jackpot。 在 该 目录 下 有 很 多 资料 ,其 中 引起 注意 的 是 已 过 期 页 面 。 该 公司 
每 个 月 都 要 更 改 产品 价格 ,并 且 保 存 过 期 页 面 。 翻 看 了 一 下 这 些 记录 ,就 可 以 估计 他 们 的 利润 
以 及 他 们 为 了 争取 一 个 合同 还 有 多 大 的 降价 空间 等 。 如 果菜 个 客户 在 谈判 之 前 查看 了 这 些 信 
息 , 他 们 在 谈判 桌 上 肯定 处 于 上 风 。 

2) SSL 

很 多 站 点 使 用 SSL 进行 安全 传送 。 进 入 一 个 SSL 站 点 是 因为 浏览 器 出 现 了 警告 消息 ,而 
且 在 地 址 栏 中 的 HTTP 变 成 了 HTTPS。 如 果 开 发 部 门 使 用 了 SSL, 测 试 人 员 需 要 确定 是 否 


有 相应 的 蔡 代 页 面 (适用 于 3.0 以 下 版 本 的 浏览 器 ,这 些 浏览 器 不 支持 SSL)。 当 用 户 进入 或 
离开 安全 站 点 的 时 候 , 请 确认 有 相应 的 提示 信息 。 是 否 有 连接 时 间 限 制 ? 超过 限制 时 间 后 出 
现 什么 情况 ? 

3) 登录 

有 些 站 点 需要 用 户 进 行 登录 ,以 验证 他 们 的 身份 。 这 样 对 用 户 是 方便 的 ,他 们 不 需要 每 次 
都 输入 个 人 资料 。 需 要 验证 系统 是 否 能 阻止 非法 的 用 户 名 /口令 登录 ,而 合法 的 用 户 名 /口令 
能 够 通过 有 效 登 录 。 用 户 登 录 是 否 有 次 数 限制 ? 是 否 限制 从 某 些 IP 地 址 登录 ? 如 果 人 允许 登 
录 失 败 的 次 数 为 3, 在 第 三 次 登录 的 时 候 输入 正确 的 用 户 名 和 口令 能 通过 验证 吗 ? 口令 选择 
有 规则 限制 吗 ? 是 否 可 以 不 登录 而 直接 浏览 某 个 页 面 ? 

Web 应 用 系统 是 否 有 超时 的 限制 ,也 就 是 说 ,用 户 登 录 后 在 一 定时 间 内 (例如 15min) 没 有 
单 击 任何 页 面 ,是 否 需 要 重新 登录 才能 正常 使 用 。 

4) 日 志文 件 

在 后 台 , 要 注意 验证 服务 器 日 志 工 作 正 常 。 日 志 是 否 记录 所 有 的 事务 处 理 ? 是 否 记 录 失 
败 的 注册 企图 ? 是 否 记 录 被 次 信用卡 的 使 用 ? 是 否 在 每 次 事务 完成 的 时 候 都 进行 保存 ? 记录 
IP 地 址 吗 ? 记录 用 户 名 吗 ? 

5) 脚本 语言 

脚本 语言 是 常见 的 安全 隐患 ,每 种 语言 的 细节 有 所 不 同 。 有 些 脚本 允许 访问 根 目录 ,有 些 
只 允许 访问 邮件 服务 器 ,但 是 经 验 丰富 的 黑客 可 以 将 服务 器 用 户 名 和 口令 发 送 给 他 们 自己 。 
找 出 站 点 使 用 了 哪些 脚本 语言 ,并 研究 该 语言 的 缺陷 。 还 需要 测试 如 果 没 有 经 过 授权 ,就 不 能 
在 服务 器 端 放置 和 编辑 脚本 。 

6. 接口 测试 

在 很 多 情况 下 ,Web 站 点 不 是 孤立 的 。Web 站 点 可 能 会 与 外 部 服务 器 通信 ,请 求 数据 、 验 
证 数据 或 提交 订单 。 

1) 服务 器 接口 

第 一 个 需要 测试 的 接口 是 浏览 器 与 服务 器 的 接口 。 测 试 人 员 提 交 事 务 ,然后 查看 服务 器 
记录 ,并 验证 在 浏览 器 上 看 到 的 正好 是 服务 器 上 发 生 的 。 测 试 人 员 还 可 以 查询 数据 库 ,确认 事 
务 数据 已 正确 保存 。 

这 种 测试 可 以 归 到 功能 测试 中 的 表单 测试 和 数据 校 验 测试 中 。 

2) 外 部 接口 

有 些 Web 系统 有 外 部 接口 。 例 如 ,网 上 商店 可 能 要 实时 验证 信用 卡 数据 以 减少 欺诈 行为 
的 发 生 。 测 试 的 时 候 ,要 使 用 Web 接口 发 送 一 些 事务 数据 ,分 别 对 有 效 信用 卡 .无 效 信用 卡 和 
被 盗 信 用 卡 进行 验证 。 如 果 商 店 只 使 用 Visa 卡 和 Mastercard 卡 , 可 以 尝试 使 用 Discover 卡 
的 数据 (简单 的 客户 端 脚本 能 够 在 提交 事务 之 前 对 代码 进行 识别 )。 通 常 ,测试 人 员 需 要 确认 
软件 能 够 处 理 外 部 服务 器 返回 的 所 有 可 能 的 消息 。 

这 种 情况 在 远程 抄 表 系 统 中 也 会 得 到 体现 。 

3) 错误 处 理 

最 容易 被 测试 人 员 和 忽略 的 地 方 是 接口 错误 处 理 。 通 常 我 们 试图 确认 系统 能 够 处 理 所 有 错 
误 , 但 却 无 法 预期 系统 所 有 可 能 的 错误 。 尝 试 在 处 理 过 程 中 中 断 事务 ,看 看 会 发 生 什么 情况 ? 
订单 是 否 完成 ? 尝试 中 断 用 户 到 服务 器 的 网 络 连 接 。 尝 试 中 断 Web 服务 器 到 信用 卡 验证 服 
务 器 的 连接 。 在 这 些 情况 下 ,系统 能 否 正 确 处 理 这 些 错 误 ? 是 否 已 对 信用 卡 进行 收费 ?如 果 


用 户 自己 中 断 事务 处 理 , 在 订单 已 保存 而 用 户 没有 返回 网 站 确认 的 时 候 , 是 否 需要 由 客户 代表 
致电 用 户 进行 订单 确认 。 在 理解 需求 的 基础 上 ,充分 发 挥 想象 力 ,尽量 比较 全 面 地 列 出 各 种 异 
常情 况 。 


9.3 ”数据 库 测试 


9.3.1 数据 库 测试 概述 


数据 库 管理 系统 经 历 了 几 十 年 的 演变 和 发 展 ,已 经 取得 了 辉煌 的 成 就 ,尤其 是 关系 数据 库 
系统 的 发 展 已 成 为 一 门 内 容 丰 富 的 学 科 。 目 前 ,市 场 上 具有 代表 性 的 数据 库 产品 包括 Oracle、 
DB2 Sybase、Mysql 以 及 SQL Server 等 。 在 一 定 意义 上 ,这些 产 品 的 特征 反映 了 当前 数据 库 
产业 界 的 最 高 水 平和 发 展 趋势 。 因 此 ,分 析 这 些 主 流产 品 的 发 展现 状 是 了 解数 据 库 技术 发 展 
的 一 个 重要 方面 。 

数据 库 管 理 系统 是 网 络 经 济 的 重要 基础 设施 之 一 。 支 持 Internet 数据 库 应 用 已 经 成 为 数 
据 库 系 统 的 重要 方面 。 例 如 ,Oracle 公司 从 8i 起 全 面 支持 因特网 应 用 ,是 因特网 数据 库 的 代 
表 。 微 软 公司 更 是 将 SQL Server 作为 其 整个 . NET 计划 中 的 一 个 重要 成 分 。 对 于 因特网 应 
用 ,由 于 用 户 数量 是 无 法 事先 预测 的 ,这 就 要 求 数据 库 相 比 以 前 拥有 能 处 理 更 大 量 的 数据 ,以 
及 为 更 多 的 用 户 提 供 服 务 的 能 力 , 也 就 是 要 拥有 良好 的 可 伸缩 性 及 高 可 用 性 。 

数据 库 技术 的 广泛 使 用 为 企业 和 组 织 收集 并 积累 了 大 量 的 数据 ,直接 导致 了 联机 分 析 处 
理 .数据 仓库 和 数据 挖掘 等 技术 的 出 现 , 促 使 数据 库 向 智能 化 方向 发 展 。 同 时 企业 应 用 越 来 越 
复杂 ,会 涉及 应 用 服务 器 、Web 服务 器 、 其 他 数据 库 \ 旧 系统 中 的 应 用 以 及 第 三 方 软件 等 ,数据 
库 产品 与 这 些 软 件 是 否 具有 良好 的 集成 性 往往 关系 到 整个 系统 的 性 能 。 

基于 目前 数据 库 管 理 系 统 发 展 的 现状 ,数据 库 专 家 将 数据 库 技术 发 展 的 特点 概括 为 : 具 
有 高 可 靠 性 、 高 性 能 、 高 可 伸缩 性 和 高 安全 性 。 数 据 库 是 企业 信息 系统 的 核心 和 基础 ,其 可 靠 
性 和 性 能 是 企业 管理 的 核心 和 依据 。 随 着 信息 化 进程 的 深化 ,计算 机 系统 越 来 越 成 为 企业 运 
营 不 可 缺少 的 部 分 ,这 时 ,数据 库 系统 的 稳定 和 高 效 是 必要 的 条 件 。 在 因特网 环境 下 还 要 考虑 
支持 几 千 或 上 万 个 用 户 同 时 存 取 和 7X24 小 时 不 间断 运行 的 要 求 ,提供 联机 数据 备份 .容错 、 
容 灾 以 及 信息 安全 措施 等 。 

从 整个 软件 系统 的 开发 来 看 ,软件 开发 技术 日 新 月 异 , 软 件 开发 也 从 以 前 的 单 层 结构 进入 
了 3 层 架 构 甚 至 现在 的 多 层 架 构 的 设计 ,而 数据 库 从 以 前 一 个 默默 无 闻 的 后 台 仓 库 , 逐 渐 成 为 
了 数据 库 系统 ,数据 库 开发 设计 人 员 也 成 为 软件 开发 中 的 核心 人 员 。 以 前 往往 把 数据 库 操作 
写 在 应 用 层 , 从 而 提高 各 个 模块 的 独立 性 和 易 用 性 ,而 现在 越 来 越 多 的 数据 库 操作 被 作为 存储 
过 程 直 接 放 在 数据 库 上 执行 以 提高 执行 效率 和 提高 安全 性 ,或 者 数据 库 的 相关 操作 作为 独立 
的 逻辑 层 存在 。 

数据 库 开 发 既然 在 软件 开发 中 的 比重 逐步 提高 ,那么 随 之 而 来 的 问题 也 很 突出 。 以 前 往 
往 重视 对 代码 的 测试 工作 , 随 着 软件 开发 技术 的 完善 和 多 元 化 ,软件 质量 得 到 了 大 幅度 的 提 
高 ,但 数据 库 方面 的 测试 仍然 处 于 起 步 阶 段 。 人 们 从 来 没有 真正 将 数据 库 作 为 一 个 独立 的 系 
统 进行 测试 ,而 是 通过 对 代码 的 测试 工作 间接 对 数据 库 进 行 一 定 的 测试 。 随 着 数据 库 开发 的 
日 益 升温 和 数据 库 系 统 的 复杂 化 ,数据 库 测试 也 需要 独立 出 来 进行 符合 数据 库 本 身 的 测试 
下 从。 


9.3.2 数据 库 功能 性 测试 


1. 测试 级 别 

从 测试 过 程 的 角度 来 说 ,可 以 把 数据 库 测 试 分 为 : 

1) 系统 测试 

传统 软件 系统 测试 的 测试 重点 是 需求 覆盖 ,而 对 于 数据 库 测 试 同样 也 需要 对 需求 覆盖 加 
以 保证 。 数 据 库 在 初期 的 分 析 和 设计 中 也 需要 对 需求 进行 分 析 、 测 试 ,例如 存储 过 程 ,视图 、 触 
发 器 约束 、 规 则 等 都 需要 进行 需求 的 验证 ,确保 这 些 功能 设计 是 符合 需求 的 。 男 一 方面 ,需要 
确认 数据 库 分 析 和 设计 文档 与 最 终 的 数据 库 是 否 相同 , 当 数 据 库 的 分 析 和 设计 文档 变化 时 , 同 
样 要 验证 这 些 修改 是 否 落 实 到 数据 库 上 。 数 据 库 系统 测试 的 依据 是 数据 库 的 分 析 和 设计 
规约 。 

2) 集成 测试 

集成 测试 是 主要 针对 接口 进行 的 测试 工作 ,从 数据 库 的 角度 ,和 普通 集成 测试 稍微 有 些 区 
别 , 对 于 数据 库 测 试 , 集 成 测试 需要 考虑 的 是 : 
数据 项 的 修改 操作 ; 
数据 项 的 增加 操作 ; 
数据 项 的 删除 操作 ; 
数据 表 增 加 记录 ; 
数据 表 删除 记录 ; 
数据 库 表 删 空 记录 ; 
删除 空 表 中 的 记录 ; 
数据 表 的 并 发 操作 ; 
针对 存储 过 程 的 接口 测试 ; 

， 结 合 业务 逻辑 做 关联 表 的 接口 测试 。 

同样 ,需要 对 这 些 接口 考虑 采用 等 价 类 、 边 界 值 错误 猜测 等 方法 进行 测试 。 例 如 ,数据 项 
的 取 值 边界 就 涉及 边界 值 问题 ,数据 项 的 取 值 类 型 划分 就 涉及 等 价 类 问题 等 。 

3) 单元 测试 

单元 测试 侧重 于 迎 辑 覆 盖 ,相对 于 复杂 的 代码 来 说 ,基于 数据 库 开发 的 单元 测试 相对 简单 
一 些 , 可 以 通过 走 查 和 这 辑 获 羔 (如 语句 覆盖 等 ) 方 式 来 实现 ,如 对 存储 过 程 的 代码 进行 走 查 。 

数据 库 系统 测试 相对 来 说 比较 困难 ,要 求 有 很 高 的 数据 库 设 计 能 力 和 丰富 的 数据 库 测 试 
经 验 ,而 集成 测试 和 单元 测试 就 相对 简单 。 数 据 库 系统 测试 .集成 测试 和 单元 测试 均 可 以 用 功 
能 测试 来 实现 ,数据 库 的 单元 测试 还 可 以 考虑 用 白 盒 测试 来 实现 。 在 实际 的 数据 库 测 试 中 往 
往 很 难 做 到 将 数据 库 的 系统 测试 .集成 测试 和 单元 测试 分 开 进行 。 

数据 库 系 统 级 别 的 测试 主要 从 数据 库 产品 的 可 扩展 性 、 可 靠 性 、 安 全 性 、 大 数据 量 、 系 统 功 
能 、 用 户 文档 6 个 方面 加 以 考虑 ,形成 对 数据 库 的 全 面 评估 与 测试 。 其 中 ,以 数据 库 系统 功能 
为 主要 测试 对 象 ,其 中 的 可 扩展 性 、 可 靠 性 \ 安 全 性 、 大 数据 量 等 也 是 通过 实现 其 功能 来 达到 测 
试 目的 的 。 因 为 能 否 正确 地 提供 数据 存储 及 管理 的 功能 、 能 否 有 效 和 正确 地 对 存储 在 数据 库 
中 的 模式 对 象 和 非 模式 对 象 进行 管理 ,是 能 否 正常 提供 数据 管理 服务 的 基础 ,也 是 数据 库 管理 
系统 能 够 真正 投入 使 用 的 前 提 , 同 时 也 考虑 到 数据 库 系 统 的 可 管理 性 ,这 些 系 统 功能 通常 通过 
图 形 化 管理 工具 来 协助 测试 。 


2. 功能 测试 内 容 

数据 库 系 统 功能 部 分 的 测试 点 为 安装 与 配置 ,数据库 存储 管理 .模式 对 象 管理 、 非 模式 对 
象 管理 ,交互 式 查 询 工 具 ,性 能 监测 与 调 优 、 数 据 迁 移 工 具 及 作业 管理 几 个 方面 。 各 个 部 分 又 
分 成 若干 个 具体 的 测试 项 目 , 具 体 测 试点 概括 如 下 : 

(1) 安装 与 配置 。 主 要 测试 数据 库 管理 系统 是 否 具有 完整 的 图 形 化 安装 程序 ,是 否 提供 
集中 式 多 服务 器 管理 及 网 络 配置 ,是否 在 安装 界面 中 显示 数据 文件 .日 志文 件 、 控 制 文 件 等 参 
数 文件 的 默认 路 径 及 其 命名 规则 ,以 及 是 否 提供 运行 参数 查看 与 设置 功能 ,能 够 正确 地 进行 数 
据 库 的 创建 和 删除 等 。 

(2) 数据 库存 储 管理 。 主 要 测试 点 为 表 空间 (文件 组 ) 管 理 . 数 据 文件 管理 .日 志文 件 管理 
以 及 归档 文件 管理 等 功能 。 

(3) 模式 对 象 管理 。 模 式 对 象 管理 是 数据 库 管 理 系 统 最 基本 的 数据 管理 服务 功能 特性 ， 
是 数据 库 所 有 功能 的 基础 。 其 主要 测试 功能 点 包括 表 管理 .索引 管理 ,视图 管理 ,约束 管理 \ 存 
储 过 程 管理 和 触发 器 管理 等 。 

。 表 管理 : 主要 测试 点 为 图 形 方式 下 表 的 创建 ,图 形 方式 下 修改 表 、 数 据 类 型 下 拉 框 选 
择 与 修改 、 重 组 表 数 据 、 图 形 工 具 中 查看 编辑 数据 ,支持 图 形 下 拉 框 条 件 选择 与 查询 、 
表 属 性 及 相关 性 图 形 化 显示 等 。 
索引 管理 : 主要 测试 点 为 创建 ,修改 索引 信息 ,提供 索引 定义 类 型 选择 ,索引 的 存储 管 
理 ,索引 重组 与 合并 等 。 
视图 管理 : 主要 测试 点 包括 图 形 方式 下 创建 、 删 除 视图 ,图 形 工具 中 查看 视图 定义 ,图 
形 工 具 中 查看 视图 数据 ,支持 条 件 查 询 ,视图 属性 及 其 相关 性 图 形 化 显示 等 。 
约束 管理 : 主要 测试 点 包括 约束 定义 与 修改 (主键 /外 键 /(NOT)NULLVCHECK/ 
UNIQUE/DEFAULT 设置 ) .支持 约束 状态 控制 ( 延 时 /立即 ) ,约束 查看 、 相 关 性 图 形 
化 显示 等 。 
存储 过 程 管理 : 主要 测试 点 包括 创建 .删除 存储 过 程 ,图 形 工 具 中 查看 ,修改 存储 过 程 
代码 (支持 所 得 即 所 写 ) 等 。 
触发 器 管理 : 主要 测试 点 包括 支持 图 形 工具 中 创建 .删除 触发 器 ,支持 行 级 触发 器 , 支 
持 语 句 级 触发 器 ,图 形 工具 中 查看 、 修 改 触发 器 代码 (支持 所 得 即 所 写 ) 等 。 

(4) 非 模式 对 象 管理 。 主 要 测试 点 为 模式 管理 ,包括 模式 的 创建 、 删 除 . 查 看 .用 户 指派 
等 ; 用 户 管理 ,包括 用 户 的 创建 、 删 除 、 修 改 、 授 权 \ 口 令 策 略 管理 ; 角色 管理 ,包括 角色 的 创 
建 、 删 除 、 修 改 、 查 看 、 用 户 指派 ; 权限 管理 ,包括 数据 库 对 象 权限 的 查看 与 指派 ,用 户 对 象 权限 
的 查看 与 指派 ; 审计 选项 设置 ,包括 语句 审计 、 对 象 审 计 、 权 限 审计 、 审 计 开 关 等 。 

(5) 交互 式 查询 工具 。 主 要 测试 点 包括 易 用 性 、 稳 定性 等 。 

(6) 性 能 监测 与 调 优 。 要 求 以 图 形 方 式 提供 SQL 语句 执行 计划 ,提供 数据 库 运 行 图 形 监 
控 , 提 供 可 配置 的 性 能 数据 跟踪 与 统计 提供 死 锁 监测 与 解锁 功能 等 。 

(7) 数据 迁移 工具 。 要 求 支持 txt 文件 的 数据 迁移 ,支持 excel 文件 的 数据 迁移 ; 支持 
XML 数据 导出 ,支持 从 SQL Server 的 表 、 约 东 及 数据 迁移 ,支持 从 Oracle 的 表 、 约 束 及 数据 
迁移 ,支持 从 DB2 的 表 、 约 东 及 数据 迁移 以 及 从 Oracle 进行 数据 迁移 的 性 能 等 。 

(8) 作业 管理 。 包 括 作 业 调 度 、 通 知 (操作 员 ) 管 理 、 维 护 计划 管理 等 。 

此 外 ,还 会 涉及 其 他 方面 的 功能 测试 ,如 在 不 同 数据 库 之 间 同 步 的 数据 ,在 测试 时 要 考虑 
数据 库 间 的 差异 ,如 边界 值 是 否 一 致 ,如 某 个 数据 库 的 时 间 范 围 是 1700 一 2999 ,而 另 一 个 数据 


库 的 时 间 范 围 是 1775 一 2999 ,此 时 同步 数据 的 时 候 就 会 出 现 异 常 。 数 据 结构 之 间 的 差异 ,如 
某 个 字段 在 一 边 数据 库 中 的 值 可 以 为 空 ,而 另 一 个 库 中 的 值 又 不 能 为 空 ,此 时 程序 要 进行 相应 
的 处 理 ,和 否则 也 会 报 异 常 。 即 使 两 边 的 数据 结构 相同 ,不 同类 型 间 的 转化 也 有 可 能 会 出 错 , 比 
如 一 边 是 char 类 型 的 ,一 边 是 varchar 类 型 的 , 取 过 来 的 时 候 一 般 会 进行 trim() ,将 后 面 的 空 
格 去 掉 , 此 时 如 果 char 字段 为 空 的 话 就 会 报 空 指针 异常 。 两 个 程序 一 起 操作 同一 张 表 的 时 
候 ,需要 测试 是 否 会 将 表 锁 住 , 这 个 情况 要 考虑 周全 ,任何 可 能 会 操作 同一 个 资源 的 情况 都 要 
考虑 到 。 并 发 操作 生成 序列 号 的 时 候 , 需 要 测试 是 否 会 因为 并 发 而 生成 重复 的 序列 号 ,这 个 非 
常 关键 。 使 用 事务 的 地 方 需要 测试 是 否 在 同一 个 事务 中 处 理 的 ,可 以 通过 程序 中 故意 抛 异 常 
的 方式 来 测试 事务 的 正确 性 。 

3. 测试 方法 

采用 黑 盒 测试 方法 ,可 以 通过 图 形 化 管理 工具 、 交 互 式 SQL 工具 等 对 数据 库 管理 系统 的 
功能 特性 进行 测试 。 要 求 被 测 数据 库 提供 Windows 和 Linux 平台 上 的 图 形 化 管理 工具 , 任 一 
平台 上 的 工具 都 能 够 管理 Windows 和 Linux 平台 上 的 数据 库 服 务 器 。 例 如 工具 DataFactory 
是 一 款 优秀 的 数据 库 数 据 自动 生成 工具 ,通过 它 可 以 轻松 地 生成 任意 结构 数据 库 , 对 数据 库 进 
行 填充 ,帮助 生成 所 需要 的 大 量 数据 ,从 而 验证 数据 库 中 的 功能 是 否 正确 。 


9.3.3 数据 库 性 能 测试 与 原因 分 析 


1, 数据 库 性 能 测试 

首先 要 分 析 什么 会 引起 数据 库 的 性 能 问题 ,一 般 来 说 有 两 个 主要 原因 : 数据 库 的 设计 和 
SQL 语句 。 数 据 库 设计 的 优 劣 在 于 数据 库 的 逻辑 结构 设计 和 数据 库 的 参数 配置 ,数据 库 参 数 
的 配置 比较 好 解决 ,数据 库 结 构 的 设计 是 测试 人 员 需 要 关注 的 ,糟糕 的 表 结构 设计 会 导致 很 差 
的 性 能 表现 。 例 如 ,没有 合理 地 设置 主键 和 索引 则 可 能 导致 查询 速度 大 大 降低 ,没有 合理 地 选 
择 数 据 类 型 也 可 能 导致 排序 性 能 降低 。 不 合理 的 .甚至 宛 余 的 数据 库 表 字段 设计 也 将 导致 对 
数据 库 访 问 效率 的 下 降 。 

低 效率 的 SQL 语句 是 引起 数据 库 性 能 问题 的 主要 原因 之 一 ,其 中 又 包括 程序 请 求 的 
SQL 语句 和 存储 过 程 、 函 数 等 SQL 语句 。 对 这 些 语句 进行 优化 能 大 幅度 地 提高 数据 库 性 能 ， 
因此 是 测试 人 员 需 要 重点 关注 的 对 象 。 

数据 库 的 性 能 优化 可 以 从 以 下 方面 考虑 : 

。 物理 存储 ; 

。 逻辑 设计 ; 

。 数据 库 的 参数 调整 ; 

。 SQL 语句 优化 。 

可 以 借助 一 些 工 具 来 帮助 找 出 有 性 能 问题 的 语句 ,例如 SQL Best Practices Analyzer、 
SQLServer 数据 库 自 带 的 事件 探查 器 和 查询 分 析 器 .LECCO SQLExpert 等 。 

【 例 9-1】 Oracle 数据 库 总 体 性 能 测试 。 

(1) CPU 利用 率 测试 。 

使 用 sar 2 10 发 现 : 

@ %wio 保持 在 50 以 上 ,%usr 和 %sys 数值 偏 低 。 

@ %usr 异常 高 ,保持 在 80 以 上 ,%wio 几乎 为 0。 而 %idle 总 是 接近 于 0。 

情形 中 说 明 数 据 的 检索 量 极 大 ,无 法 从 缓冲 区 中 及 时 得 到 ,Oracle 系统 进程 被 迫 从 数据 


文件 上 将 数据 读 人 缓冲 区 替换 掉 一 些 陈 旧 的 数据 ,从 而 使 Oracle 服务 进程 处 于 等 待 状态 。 这 
是 缓冲 区 不 足 的 表现 ,可 以 通过 适当 增加 缓冲 区 大 小 来 缓解 矛盾 ,但 不 能 根本 上 解决 问题 , 首 
先 内 存 区 域 有 限 , 不 可 能 一 直 增 加 下 去 ; 其 次 ,即使 缓冲 区 足够 容纳 下 所 需 数据 ,矛盾 会 向 @ 
转化 。 

情形 @ 说 明 Oracle 服务 进程 已 能 从 缓冲 区 中 得 到 几乎 所 有 需要 的 数据 ,但 由 于 宛 余数 据 
多 ,分 析 时 间 比 较 长 ,使 CPU 计算 能 力 过 多 地 被 分 配 到 Oracle 服务 进程 上 。 

两 者 的 发 生 多 为 检索 策略 失当 ,特别 是 在 对 索引 的 设计 和 利用 上 ,从 而 导致 表 扫 描 。 必 须 
结合 应 用 程序 的 设计 来 进行 改进 . 仅 在 Oracle 层面 上 很 难 有 所 作为 。 

曾经 发 生 过 一 种 情形 类 似 中 ,只 是 %wio 不 算 太 高 ,而 %idle 很 高 。 无 法 用 常理 分 析 , 更 
换 存储 设备 后 解决 ,推测 是 存储 设备 的 问题 。 

(2) 内 存 和 交换 空间 测试 。 

每 个 Oracle 服务 进程 大 约 占用 5MB 内 存 , 内 存 不 足 时 ,容易 引起 物理 页 的 频繁 换 入 换 
出 ,使 系统 I/O 活动 增加 ; 还 会 预 留 20MB 左右 交换 空间 , 当 交 换 空间 不 足 时 ,就 不 能 增加 新 
的 Oracle 连接 。 

vmstat 2 10 观察 memory 和 swap 的 空闲 情况 ,注意 pi(kilobytes page in) ,po(kilobytes 
page out) ,结合 sar -d 2 10 观察 磁盘 的 繁忙 程度 ,及 时 调整 硬件 。 

(3) 联机 日 志 测 试 。 

sar -d 2 10 观察 磁盘 I/O ,注意 read 和 write 的 比例 。 

如 write 比例 过 高 ,打开 $ ORACLE_BASE/admin/oradb/bdump/alert. log ,检查 日 志文 
件 切换 间隔 ,如 小 于 15min, 说 明日 志文 件 太 小 ,导致 切换 频率 过 高 ,引起 缓冲 区 和 数据 文件 的 
同步 发 生 过 于 频繁 。 则 考虑 Oracle 初始 化 配置 文件 中 log_checkpoint_interval 和 db_writer_ 
processes 的 值 。 

【 例 9-2】 性 能 测试 应 用 实例 。 

问题 描述 : 一 个 面向 全 国 各 个 中 小 学 的 信息 管理 系统 , 随 着 系统 被 广泛 地 应 用 ,访问 人 数 
急剧 增加 ,数据 量 也 在 飞速 增长 ,如 何 为 用 户 提供 方便 、 快 捷 的 应 用 呢 ? 经 过 相关 技术 人 员 的 
讨论 ,决定 采用 数据 库 的 集群 技术 来 解决 这 些 问题 ,将 先前 1 台数 据 应 用 服务 器 扩展 为 3 台 。 
数据 库 为 Mysql, 如 果 关 心 数据 库 的 集群 技术 ,请 查阅 相关 资料 ,在 这 里 不 再 费 述 。 实 施 的 整 
体 思路 是 : 由 于 操作 人 员 主 要 是 进行 数据 的 插入 工作 ,在 某 一 段 时 间 内 操作 人 员 比 较 集中 , 数 
据 量 也 较 大 ,为 了 估计 集群 后 会 给 性 能 带 来 多 大 的 提升 ,分 别 部 署 了 两 套 运 行 环境 ,一 套 是 先 
前 的 单一 数据 库 应 用 服务 器 环境 ,另外 一 套 则 是 3 台数 据 库 服务 器 进行 集群 。 为 了 记录 用 户 
并 发 插入 大 数据 量 时 系统 的 响应 时 间 ,在 相关 表 中 添加 了 日 期 时 间 型 字段 ,记录 搬入 首 条 和 林 
尾 记录 的 时 间 , 这 样 ,末尾 时 间 减 去 首 条 记录 插入 时 间 就 是 多 用 户 并 发 插入 大 批量 数据 的 执行 
时 间 了 。 实 施 过 程 的 第 一 步 是 数据 库 管 理 员 用 Java 写 了 一 段 代码 : 

import java. sql. *; 

public class testclus { 

public static void main(String[ ] args) { 
// 如 果 传人 参数 个 数 不 等 于 2, 则 给 出 提示 信息 "调用 : java testclus ip: port recordcnt" 


if(args. length!= 2) 
{ 


System. out. println(" 调 用 : java testclus ip: port recordcnt"); 
return; 


} 


// 根 据 传 人 参数 ,动态 建立 连接 字符 串 
String URL = "jdbc: mysql: //" + args[0] + "/testclus characterEncoding = gbk"; 
int cnt = Integer.parseInt(args[1]); 
try{ 
// 声 明 并 得 到 起 始 记录 插 和 人 时间 
long timeBegin; 
java. util.Date dl = new java.util.Date(); 
// 数 据 库 连 接 初始 化 操作 
Class. forName( "com. mysql. jdbc. Driver").newInstance(); 
Connection conn = DriverManager. getConnection(URL, "root", "admin"); 
// 循 环 插入 记录 
PreparedStatement pstmt = conn. prepareStatement ( " insert into test (cnt, timer ) 
values(?, now())"); 
Statement s = conn. createStatement (ResultSet. TYPE_SCROLL SENSITIVE, ResultSet. 
CONCUR_READ_ONLY) ; 
timeBegin = dl.getTime(); 
for(int i=1; i<=cnt; i++) 
{ 
pstmt. setInt(1,1i); 
pstmt. executeUpdate( ); 
ResultSet rs = s. executeQuery("select count( * ) from test"); 
} 
conn. close(); 
// 得 到 末尾 记录 和 起 始 记 录 插入 的 时 间 差 值 并 输出 
java. util. Date d2 = new java.util.Date(); 
System. out. println(d2. getTime( ) - timeBegin+ " 毫秒 "); 
} 
// 异 常 处 理 部 分 
catch(ClassNotFoundException e) { 
System. out. println(" 找 不 到 驱动 程序 "); 
e. printStackTrace( ); 
} 
catch( SQLException e) { 
e. printStackTrace( ); 
} 
catch(Exception e) { 
e. printStackTrace( ); 
} 


} 
接 下 来 ,再 建立 一 个 批 处 理 文件 , 批 处 理 文件 内 容 如 下 : 


@echo off 

if "% JAVA HOME%" == "" goto error setting 

set CLASSPATH = % JAVA HOME% "jre"lib"rt. jar 

set CLASSPATH = % CLASSPATH % ;mysql - connector - java— 3.1.7- bin. jar;testclus. jar 
% JAVA_HOME % "bin"java 一 classpath " % CLASSPATH% " testclus %1 %2 

goto end 

: error_ setting 

Wn caiaeeetecoscaaeaanio 
echo 使 用 方法 : 

echo 1. 请 设置 JAVA_HOME 环境 变量 (JDK1.4 安装 路 径 ); 

echo ”2. 请 先 将 本 程序 所 在 的 目录 选择 为 当前 目录 后 再 执行 . 


goto end 
: end 
set CLASSPATH = 


批 处 理 接受 两 个 参数 ,第 一 个 参数 为 数据 库 服 务 器 的 “IP 地 址 十 : 十 端口 号 ”, 第 二 个 
参数 为 需要 循环 插入 的 数据 。 如 testclus 192. 168. 0. 45: 3306 1000, 其 含义 就 是 向 IP 地址 
为 192. 168. 0. 45 ,端口 为 3306 的 mysql 数据 库 中 插入 1000 条 记录 。 

LoadRunner 如 何 调用 批 处 理 文 件 呢 ? LoadRunner 中 可 以 调用 System 函数 来 调用 一 个 
可 执行 文件 或 者 批 处 理 文件 等 ,所 以 就 可 以 直接 调用 该 函数 ,指定 相关 参数 。 为 了 能 够 进行 多 
用 户 并 发 ,需要 插入 集合 点 。 相 关 脚本 如 下 : 


# include "web_api.h" 

Action() 

{ 
lr_rendezvous("in"); 
system("testclus 192.168.0.45: 3306 1000"); 
return 0; 


} 
为 了 进行 集群 测试 ,还 需要 另外 创建 两 个 脚本 ,两 个 脚本 如 下 : 


# include "web_api. h" 
Action() 
{ 
lr_rendezvous("in"); 
system("testclus 192.168.0.44: 3306 1000"); 
return 0; 


} 


# include "web_api.h" 
Action() 
{ 
lr_rendezvous("in"); 
system("testclus 192.168.0.46: 3306 1000"); 
return 0; 


} 
接 下 来 就 可 以 分 别 在 Controller 中 进行 负载 了 ,相应 场景 设置 如 图 9-10 和 图 9-11 所 示 。 


Scenario Groups 


Group Name SciptPah ny Losd Generators 
EA dabasetest | ENestclusvdabaselesl 150 locahost 
图 9-10 单一 数据 应 用 服务 器 场景 设置 
Scenario Groups 
Sept Path uy Load Generakors | 

dabasetest1 EVestchus\dabasetest 50 localhost 

回 dabasetes44 ENestciusvdabasetest44 50 locahost 

回 dabaretest46 ENestchusvdabasetesh45 器 locahost 


9-11 三 台数 据 应 用 服务 器 集群 场景 设置 


而 后 该 场景 在 数据 库 为 空 和 数据 库存 在 百 万 条 记录 情况 下 分 别 进行 测试 ,经 过 几 轮 测试 ， 
对 结果 的 分 析 发 现 集群 后 性 能 比 单 台数 据 应 用 服务 器 的 性 能 提高 3 一 5 倍 。 


2. 数据 库 性 能 问题 及 原因 分 析 

数据 库 服务 器 性 能 问题 主要 表现 在 某 些 类 型 操作 的 响应 时 间 过 长 ,同一 类 型 事务 的 并 发 
处 理 能 力 差 和 锁 冲 突 频繁 发 生 等 方面 。 应 该 说 ,这 些 问题 是 数据 库 服 务 器 性 能 不 佳 的 典型 表 
现 。 由 于 造成 上 述 情况 的 原因 众多 ,需要 分 情况 加 以 分 析 。 

1) 单一 类 型 事务 响应 时 间 过 长 

响应 时 间 (Response Time,RT) 是 系统 完成 事务 执行 准备 后 所 采集 的 时 间 惟 和 系统 完成 
待 执 行事 务 后 所 采集 的 时 间 蕉 之 间 的 时 间 间 隔 , 是 衡量 特定 类 型 应 用 事务 性 能 的 重要 指标 , 标 
志 了 用 户 执 行 一 项 操作 大 致 需要 多 长 时 间 。 响 应 时 间 过 长 意味 着 用 户 完成 执行 一 项 命令 需要 
等 待 相当 长 的 时 间 。 实 践 表明 ,通常 情况 下 用 户 能 够 接受 的 响应 时 间 最 大 为 200ms。 不 仅 如 
此 ,响应 时 间 过 长 也 是 造成 系统 锁 冲 突 严重 的 重要 原因 之 一 。 

造成 响应 时 间 过 长 的 原因 非常 复杂 ,通常 可 以 从 以 下 几 个 方面 考虑 。 

(1) 数据 库 服 务 器 负载 过 重 。 

数据 库 服务 器 负载 过 重 不 可 避免 地 会 造成 响应 时 间 过 长 。 这 标志 着 当前 服务 器 系统 的 硬 
件 条 件 不 能 满足 实际 用 户 对 性 能 的 需要 。 服 务 器 负载 过 重 主要 表现 在 CPU 使 用 率 高 .内 存 
占用 率 大 、I/O 与 页 面 交换 频繁 发 生 等 方面 。 由 于 服务 器 系统 本 身 一 般 都 提供 性 能 监控 程序 ， 
因此 定位 服务 器 性 能 问题 相对 比较 容易 。 解 决 这 类 问题 的 方法 一 般 是 升级 服务 器 硬件 ,提高 
数据 库 服务 器 本 身 的 处 理 能 力 。 但 是 ,通过 升级 服务 器 硬件 获得 的 性 能 提升 是 很 有 限 的 ,并 且 
对 于 某 些 诸如 算法 复杂 度 过 高 等 问题 根本 无 法 解决 。 

(2) 糟糕 的 数据 库 设 计 。 

糟糕 的 数据 库 设 计 是 导致 单一 事务 响应 时 间 过 长 的 最 重要 原因 。 通 常 ,数据 库 设计 在 系 
统 开发 初期 进行 ,此 时 ,数据 库 设 计 人 员 往 往 对 数据 的 实际 规模 和 特性 没有 足够 的 了 解 。 在 数 
据 库 设 计 方 面 ,对 响应 时 间 影 响 较 大 的 因素 有 数据 库 表 的 规模 、 索 引 的 使 用 数据 的 分 布 查 询 
优化 等 。 其 中 索引 的 使 用 极 大 地 影响 了 事务 执行 的 响应 时 间 。 实 际 上 ,很 多 情况 下 应 用 程序 
在 访问 大 规模 数据 库 表 时 的 确 没有 使 用 索引 。 造 成 这 种 情况 的 原因 通常 是 开发 人 员 的 朴 忽 ， 
也 有 用 户 的 需求 变化 过 多 , 某 些 数据 库 字段 不 适合 建立 索引 的 情况 。 在 这 里 需要 特别 指出 的 
是 ,对 组 合 索引 进行 查询 时 ,查询 条 件 中 字段 的 顺序 与 数据 库 设 计 的 索引 字段 顺序 要 一 致 。 如 
果 顺 序 颠 倒 , 组 合 索 引 根本 不 能 被 数据 库 使 用 。 例 如 表 A (fieldl, field2, field3), 有 组 合 索 
引 index(fieldl, field2) ,诸如 SELECT * FROM A WHERE ((field2 = condition2) AND 
(Cfieldl 王 conditionD)) 和 SELECT * FROM A WHERE (field2 一 condition2) 的 查询 无 法 使 用 
index 索引 。 此 外 ,并 非 增加 索引 就 一 定 能 够 提高 单一 事务 执行 的 响应 时 间 。 过 多 的 索引 使 
用 将 极 大 地 增加 插入 (INSERT) 操 作 的 花费 ,从 而 使 响应 时 间 变 长 。 

数据 库 表 规模 过 大 是 指 单一 数据 库 表 的 记录 数 在 百 万 行 以 上 ,对 这 类 表 直 接 进行 检索 而 
不 采取 必要 的 优化 手段 ,必然 造成 单一 查询 响应 时 间 过 长 。 如 果 数 据 库 表 的 规模 一 再 增 大 ,使 
用 索引 也 不 能 很 有 效 地 解决 响应 时 间 过 长 的 问题 。 对 此 类 问题 ,可 能 的 解决 办 法 是 对 数据 进 
行 分 布 , 使 查询 能 够 并 行 执行 或 缩小 查询 的 范围 。 目 前 ,主流 关系 数据 库 管理 系统 都 提供 表 分 
区 (分 段 ) 存 储 , 以 使 得 软件 开发 人 员 比 较 容易 地 实现 数据 分 布 。 

查询 优化 对 响应 时 间 的 影响 也 不 容 忽视 ,尽管 优化 活动 由 数据 库 管 理 系统 完成 。 实 际 上 
一 条 结构 化 查询 语句 的 写法 有 很 多 种 ,不 同 的 写法 可 能 有 不 同 的 响应 时 间 ,这 一 差别 可 能 非常 
大 。 如 果 开 发 人 员 在 软件 编写 过 程 中 恰好 使 用 了 执行 效率 低 的 SQL 语句 ,其 响应 时 间 自 然 就 
会 变 长 。 目 前 , 某 些 独立 软件 开发 商 已 经 注意 到 这 种 情况 ,并 开发 了 相应 的 软件 帮助 应 用 软件 


开发 人 员 找到 执行 最 快 的 SQL 语句 的 写法 。 但 是 ,由 于 数据 库 本 身 是 动态 变化 的 ,执行 最 快 
的 SQL 语句 也 可 能 变化 ,因此 这 种 方法 也 是 有 局 限 性 的 。 

(3) 事务 粒度 过 大 。 

事务 粒度 过 大 是 指 单一 数据 库 事务 执行 过 程 中 ,需要 以 某 种 并 发 控制 机 制 访问 多 个 数据 
库 资源 。 通 常 采 用 的 并 发 控制 机 制 是 互 斥 锁 或 者 共享 锁 。 这 种 大 粒度 事务 的 执行 由 于 要 访问 
多 个 数据 库 资源 (如 数据 库 表 ) ,本 身 就 需要 消耗 相当 长 的 时 间 。 此 外 ,由 于 通常 事务 在 执行 的 
时 候 会 对 数据 库 资源 进行 加 锁 , 这 类 事务 也 对 其 他 访问 该 资源 的 用 户 造成 影响 。 由 于 这 类 事 
务 通 常 使 用 的 锁 数 量 都 在 两 个 以 上 ,如 果 不 合理 地 进行 控制 , 极 容易 造成 死 锁 。 因 此 ,在 应 用 
软件 设计 过 程 中 ,应 该 尽量 消除 大 粒度 事务 。 

(4) 批 任务 对 普通 用 户 性 能 的 影响 。 

批 任务 是 指 一 次 操作 将 对 数据 库 中 大 量 数 据 进行 互 斥 访问 的 数据 库 事务 。 这 种 类 型 事务 
通常 将 更 新 同一 个 数据 库 表 中 的 数 千 项 乃至 更 多 的 数据 。 由 于 这 类 任务 把 所 有 操作 放置 在 同 
一 个 数据 库 事务 中 ,所 访问 的 资源 在 其 执行 过 程 中 始终 被 锁定 ,必然 会 对 其 他 普通 事务 造成 访 
问 影响 。 此 外 ,由 于 这 类 任务 本 身 将 对 数据 库 服务 器 造成 巨大 的 负担 ,使 得 服务 器 负载 加 重 ， 
从 而 影响 独立 事务 的 响应 时 间 。 通 常情 况 下 , 批 任务 推荐 在 系统 具有 较 长 空闲 时 完成 (如 晚 
上 ) ,这 样 可 以 保证 不 对 独立 事务 造成 影响 。 如 果 由 于 业务 的 要 求 , 批 任务 必须 与 独立 事务 混 
合 运 行 , 则 必须 对 其 加 以 改造 ,以 减轻 对 其 他 事务 的 影响 。 

2) 并 发 处 理 能 力 差 

并 发 处 理 能 力 差 是 指 应 用 系统 在 执行 同一 类 型 事务 的 多 个 实例 时 ,不 能 获得 与 执行 实例 
数量 相当 的 吞吐 量 ,而 是 大 大 低 于 理论 值 。 一 般 来 说 ,这 类 问题 都 是 由 于 互 斥 访问 造成 的 , 即 
并 发 执行 中 的 某 个 实例 以 互 斥 方式 对 资源 进行 访问 ,造成 了 其 他 同类 型 用 户 必 须 等 待 该 实例 
释放 锁定 资源 后 才能 执行 。 应 该 指出 ,由 于 某 些 资源 必须 以 互 斥 的 方式 进行 访问 , 某 些 类 型 的 
事务 在 同一 时 间 只 能 有 一 个 执行 。 对 于 并 发 处 理 能 力 差 的 问题 ,可 能 的 解决 方法 有 降低 同一 
类 型 事务 中 锁 的 粒度 ,优化 应 用 逻辑 以 缩短 单一 类 型 事务 响应 时 间 等 。 

3) 锁 冲 突 严重 

锁 冲 突 是 每 个 以 关系 数据 库 为 核心 的 信息 系统 必须 解决 的 问题 。 这 里 的 锁 冲 突 是 指 同一 
类 型 或 不 同类 型 事务 在 并 发 执行 的 情况 下 ,由 于 资源 互 斥 而 相互 影响 ,造成 一 个 或 多 个 事务 无 
法 正常 执行 的 情况 ,包括 资源 锁定 造成 的 数据 库 事务 超时 和 死 锁 两 个 方面 。 

(1) 资源 锁定 造成 的 数据 库 事务 超时 。 

资源 锁定 导致 的 数据 库 事务 超时 ,其 原因 是 多 方面 的 ,其 中 批 任务 影响 其 他 类 型 独立 事务 
的 情况 占有 相当 大 的 比重 。 此 外 , 某 些 改造 过 的 批 任务 由 于 频繁 对 特定 资源 进行 锁定 ,也 会 对 
独立 事务 造成 相当 大 的 影响 。 如 果 在 设 定时 间 内 ,数据 库 服 务 器 由 于 资源 锁定 没有 能 够 完成 
客户 端 发 出 的 操作 请 求 ,数据 库 服务 器 将 通知 被 锁定 的 客户 端 该 操作 超时 。 

某 些 大 粒度 事务 在 并 发 执行 的 实例 较 多 时 也 会 造成 同类 或 不 同事 务 的 数据 库 超时 。 

此 外 ,应 用 系统 如 果 没 有 健壮 的 异常 处 理 机 制 , 很 可 能 造成 锁 资 源 不 被 释放 ( 即 开始 的 事 
务 既 没有 提交 也 没有 回 滚 ) 。 当 这 种 错误 发 生 时 ,必然 造成 资源 被 长 久 锁定 。 对 此 类 问题 ,应 
用 系统 在 开发 的 过 程 中 需要 采取 一 套 完 善 的 异常 处 理 机 制 ,确保 资源 不 被 长 期 锁定 。 

(2) 数据 库 死 锁 。 

由 于 数据 库 死 锁 可 以 看 作 进程 间 死 锁 的 一 种 特殊 情况 ,可 以 采取 与 处 理 操作 系统 死 锁 相 
类 似 的 方法 解决 数据 库 死 锁 的 问题 。 造 成 死 锁 必须 具备 下 述 条 件 : 


中 互 斥 条 件 。 每 一 个 资源 或 者 被 分 配给 特定 的 进程 或 者 可 用 。 

@ 持 有 并 等 竺 条件 。 被 授权 持 有 资源 较 早 的 进程 可 以 请 求 新 的 资源 。 

@ 不 可 取代 原则 。 事 先 被 赋予 的 资源 不 能 够 从 该 进程 被 强制 取 走 ,它们 必须 被 所 持 有 的 
进程 明确 释放 。 

@ 环 等 待 条 件 。 必 须 存 在 两 个 或 者 多 个 进程 的 环形 链 ,其 中 每 一 进程 都 等 待 由 环形 链 的 
下 一 个 成 员 所 持 有 的 资源 。 

由 于 软件 开发 人 员 对 资源 争 用 可 能 造成 的 死 锁 问题 往往 没有 充分 考虑 ,而 目前 主流 数据 
库 管 理 系 统 主要 采用 乐观 的 并 发 控制 算法 ,导致 应 用 系统 实际 使 用 过 程 中 频繁 发 生死 锁 。 应 
该 说 明 , 同 类 型 数据 库 事务 的 不 同 实例 之 间 由 于 访问 资源 的 顺序 一 致 ,通常 情况 不 会 发 生死 
锁 ; 不 同类 型 事务 之 间 如 果 没 有 按照 一 个 统一 的 契约 进行 并 发 访问 , 极 容易 形成 死 锁 。 因 此 ， 
在 确保 应 用 系统 功能 的 前 提 下 ,制定 一 个 不 同事 务 之 间 进 行 并 发 访问 的 原则 ,就 可 以 有 效 消除 
环 等 待 , 减 少 死 锁 发 生 的 可 能 性 。 

4) 性 能 瓶颈 的 处 理 方法 

针对 数据 库 的 性 能 问题 ,一 般 应 采用 什么 样 的 解决 办 法 呢 ? 在 对 数据 库 服 务 器 常见 性 能 
问题 进行 充分 研究 的 基础 上 ,我 们 提出 了 一 套 适用 于 解决 已 发 布 数据 库 系统 性 能 问题 的 通用 
方法 。 

必须 指出 ,解决 数据 库 性 能 问题 是 一 个 迭代 和 反复 的 过 程 ,通常 需要 在 各 种 条 件 的 矛盾 之 
间 寻 求 最 佳 的 平衡 点 。 下 面 分 别 分 析 。 

(1) 监视 并 记录 性 能 相关 数据 。 

对 数据 库 服 务 器 软件 .操作 系统 、 网 络 环境 乃至 客户 端 等 各 类 处 理 单元 的 性 能 相关 信息 进 
行 监视 并 记录 是 发 现 数据 库 性 能 问题 的 基础 。 这 一 步骤 的 作用 是 搜集 与 数据 库 服务 器 性 能 表 
现 密切 相关 的 数据 ; 作为 分 析 性 能 问题 的 基础 。 由 于 各 个 处 理 单元 的 状态 是 随 着 时 间 的 推移 
而 动态 变化 的 ,性 能 数据 的 监视 与 采集 必须 尽 可 能 详细 地 记录 下 所 有 时 间 点 上 各 个 处 理 单元 
的 状态 信息 。 为 此 ,采取 对 各 个 采样 时 间 点 的 处 理 单 元 状态 信息 进行 快照 方式 来 对 性 能 相关 
数据 进行 监控 和 记录 , 相 邻 采样 时 间 点 之 间 的 间隔 越 小 ,状态 信息 就 越 准确 。 

在 各 类 监视 活动 中 ,对 数据 库 服务 器 软件 性 能 属性 的 监视 是 整个 活动 的 重点 ,主要 集中 在 
数据 库 会 话 的 状态 信息 ,执行 的 结构 化 查询 语句 和 锁 使 用 情况 等 方面 。 其 中 ,状态 信息 代表 了 
单一 数据 库 会 话 在 其 生命 周期 中 的 状态 变化 情况 ,包括 在 哪 一 个 时 间 点 开始 一 个 事务 ,在 哪 一 
个 时 间 点 被 其 他 会 话 锁定 , 何 时 超时 等 。 执 行 的 结构 化 查询 语句 代表 单一 数据 库 会 话 在 其 生 
命 周 期 中 执行 的 所 有 数据 库 操作 。 锁 使 用 情况 代表 整个 数据 库 服 务 器 的 锁 资源 使 用 和 变化 情 
况 。 此 外 ,顺序 扫描 、 高 代价 查询 等 属性 也 是 代表 数据 库 服务 器 性 能 的 重要 数据 。 

(2) 定位 资源 占用 较 大 的 事务 并 做 出 必要 的 优化 或 调整 。 

通过 对 数据 库 锁 使 用 情况 和 SQL 语句 的 执行 历史 进行 分 析 , 可 以 发 现 一 个 事务 同时 占 
用 大 量 数据 库 锁 的 应 用 逻辑 事务 。 通 常 这 类 事务 都 属于 批 任务 。 由 于 批 任务 本 身 的 特性 ， 
决定 了 在 其 整个 执行 过 程 中 必然 消耗 大 量 资源 ,最 好 将 其 放置 在 系统 具有 充分 空闲 时 间 时 
进行 。 

(3) 定位 锁 冲 突 ,修改 锁 冲 突 发 生 严重 的 应 用 逻辑 。 

如 果 应 用 系统 锁 冲 突 频繁 发 生 ,那么 该 系统 的 性 能 表现 不 可 能 令 人 满意 。 导 致 这 种 问题 
的 原因 非常 复杂 ,主要 表现 在 事务 粒度 过 大 、 响 应 时 间 过 长 .异类 事务 互相 影响 并 形成 死 锁 等 
情况 。 通 过 对 数据 库 锁 使 用 情况 信息 的 分 析 , 可 以 定位 发 生 锁 冲突 的 各 个 会 话 。 在 此 基础 上 


对 发 生 锁 冲突 的 会 话 各 自 的 执行 状态 变化 和 结构 化 查询 语句 进行 分 析 , 可 以 定位 发 生 锁 冲 突 
的 应 用 逻辑 源 程序 。 如 果 造 成 锁 冲 突 的 是 同 种 或 者 异种 普通 事务 ,必须 对 其 本 身 特性 加 以 分 
析 ,确定 是 否 本 身 粒 度 过 大 ,数据 访问 是 否 存在 瓶颈 等 。 对 这 类 事务 的 优化 相对 较 难 ,一 般 需 
要 开发 人 员 的 经 验 和 对 应 用 逻辑 本 身 特 性 的 了 解 。 

(4) 进行 必要 的 数据 分 布 。 

数据 分 布 的 主要 目的 是 通过 数据 库 服务 器 的 并 行 执行 特性 ,使 得 单一 事务 的 执行 具有 较 
短 的 响应 时 间 和 不 同类 的 事务 之 间 影 响 相 对 缩小 。 在 缩短 响应 时 间 方 面 ,这 种 方法 主要 适 
于 对 规模 较 大 的 数据 库 表 进 行 访问 的 情况 。 它 不 仅 使 得 特定 的 查询 可 以 并 行 执行 ,而 且 有 可 
能 改变 结构 化 查询 语句 的 执行 计划 ,缩小 查询 进行 的 范围 。 此 外 ,对 于 异类 事务 之 间 ,或 者 同 
类 事务 的 不 同 实例 锁 冲 突 频繁 的 问题 ,可 以 通过 数据 分 布 加 以 解决 。 


9.3.4 数据 库 可 靠 及 安全 性 测试 


1. 可 靠 性 测试 
1) 测试 内 容 
作为 支撑 企业 应 用 的 后 台 核心 和 基础 ,数据 库 系统 的 稳定 可 靠 性 是 应 用 企业 最 关心 的 问 
题 , 它 与 整个 企业 的 经 营 活动 密切 相关 ,一 旦 出 现 宕 机 或 者 数据 丢失 ,企业 的 损失 将 无 法 估量 ， 
这 不 仅仅 只 是 企业 的 经 济 利益 会 遭受 损失 的 问题 ,甚至 会 引起 一 些 法 律 纠纷 ,比如 银行 系统 和 
证 券 系统 等 。 另 外 ,在 一 些 意外 造成 数据 库 服务 停止 的 情况 下 ,如何 尽 快 地 恢复 服务 也 是 必须 
考虑 的 问题 。 因 此 ,应 该 对 数据 库 系 统 7X24 小 时 不 间断 运行 的 能 力 、 数 据 备份 .容错 、 容 灾 等 
能 力 进行 测试 ,测试 点 如 下 。 
。 数据 库 备份 : 考察 数据 库 系统 能 否 支持 多 种 完全 备份 方式 ,包括 对 指定 库 、 指 定 某 一 
对 象 、 指 定 一 组 对 象 进行 备份 ; 是 否 支持 多 种 完全 还 原 方式 ,包括 对 指定 库 、 指 定 某 一 
对 象 .指定 一 组 对 象 进行 还 原 ; 是 否 支持 对 指定 库 进 行 增 量 备份 以 及 支持 联机 备份 
等 ,同时 还 要 考察 系统 备份 恢复 的 效率 。 
。 故障 恢复 : 在 系统 出 现 故障 或 者 存储 介质 出 现 故障 的 情况 下 ,数据 库 系 统 是 否 提供 相 
应 的 数据 恢复 机 制 。 
。 运行 稳定 性 : 数据 库 系 统 的 长 期 稳定 运行 能 力 是 应 用 系统 对 后 台数 据 库 的 最 基本 要 
求 ,因此 有 必要 对 数据 库 进行 不 间断 运行 7X24 小 时 的 测试 。 
。 数据 库 复制 : 数据 库 系 统 是 否 提供 了 数据 库 复制 的 机 制 。 
2) 测试 方法 
采用 黑 盒 测试 方法 ,对 Windows 和 Linux 平台 上 的 数据 库 服务 器 分 别 进行 测试 。 由 于 该 
部 分 测试 为 功能 验证 性 测试 ,因此 以 人 工 测 试 为 主 , 同 时 ,借助 性 能 测试 工具 进行 各 种 负载 测 
试 并 进行 结果 验证 。 
3) 测试 用 例 设计 
针对 每 一 个 测试 点 ,必须 设计 有 效 的 测试 策略 和 测试 用 例 对 其 进行 测试 ,测试 用 例 包括 输 
入 ,预期 的 结果 以 及 功能 是 否 正确 的 判断 标志 等 。 例 如 ,可 以 用 压力 测试 工具 对 联机 事务 处 理 
的 系统 进行 测试 ,测试 数据 库 系统 的 稳定 性 及 故障 的 恢复 能 力 。 在 测试 过 程 中 可 以 加 载 不 同 
的 数据 量 ,借助 该 工具 也 可 以 完成 对 数据 库 完全 备份 增 量 备份 的 测试 工作 。 压 力 测试 工具 的 
最 大 特点 就 是 满足 频繁 的 联机 事务 处 理 , 因 此 它 对 后 台数 据 库 的 稳定 运行 也 有 较 高 的 要 求 , 利 
用 该 工具 可 以 完成 对 数据 库 系统 7X24 小 时 不 间断 运行 能 力 的 测试 。 


4) 举例 : 数据 库 备 份 和 恢复 测试 
(1) export 与 import 方式 备份 和 恢复 测试 。 


。 export 整个 instance。 
exp dbuser/oracle file = user. dmp 10g = user. log full =y consistent =y direct =y 


user 应 具有 dba 权限 。 
。 export/import 某 个 用 户 所 有 对 象 。 


exp dbuser/oracle file = user. dmp 10g = user. log owner = user buffer = 2048000 feedback = 1000 
imp user2/oracle file = user. dmp 1og = user. log fromuser = user touser = user2 buffer = 2048000 
commit =y ignore = 了 


。 export/import 某 几 张 表 。 
exp dbuser/oracle file = user. dmp 10g = user. 1og tables = tablel, table2 buffer = 2048000 feedback = 1000 


还 可 加 上 query 二 \"where coll 一 \…\'and col2\ 志 …", 但 不 可 用 于 藤 套 表 ,coll .col2 必 
须 同 时 适用 于 tablel ,table2 ,一 般 只 用 于 倒 单 张 表 。 


imp user2/oracle file = user. dmp 1og = user. 1og tables = tablel, table2 fromuser = user touser = 
user2 buffer = 2048000 commit =y ignore=Y 


。 对 于 较 大 的 数据 量 ,单个 dump 文件 有 可 能 超出 文件 系统 2GB 的 限制 。 
先 export dbuser 所 拥有 的 数据 对 象 结构 ,不 倒 表 数 据 。 


exp dbuser/oracle file = dbuser. dmp 1og = user. 1og owner = user buffer = 2048000 rows =n 
再 export 单 张 表 的 数据 。 


sqlplus —s dbuser/oracle <<EOF >/dev/null 


spool tables. txt; 

select table name from user tables; 

spool off; 

exit; 

EOF 

for table in $ (cat tables. txt) 

do 

exp dbuser/oracle file= $ {table}_$ (date '+ %Y%m%d').dmp tables= $ table buffer = 4096000 
done 


恢复 过 程 仍 按 此 顺序 进行 ,或 者 可 以 dump 成 指定 大 小 的 文件 。 


exp dbuser/oracle file = 1.dmp,2.dmp,3.dmp,… filesize= 100m tables = emp buffer = 4096000 
imp dbuser/oracle file=\(1. dmp, 2. dmp, 3. dmp, …\) filesize = 100m tables = emp fromuser = dbuser 
touser = dbuser buffer = 4096000 commit =y ignore=y 


。 direct。 
direct 二 y 可 以 使 export 的 dump 过 程 跳 过 SQL 解析 过 程 ,从 而 提高 效率 ,同时 query、 
buffer 参数 失效 。 


。 consistent。 


自 export 启动 后 ,consistent 二 y 冻结 来 自 其 他 会 话 的 对 export 操作 的 数据 对 象 的 更 新 ， 


这 样 可 以 保证 dump 结果 的 一 致 性 。 但 这 个 过 程 不 能 太 长 ,以 免 回 滚 段 和 联机 日 志 消 耗 完 。 

恢复 后 检查 数据 库 是 否 运行 正常 ,数据 是 否 得 到 完整 恢复 。 

(2) 冷 备份 测试 。 

shutdown 数据 库 , 将 所 有 和 本 instance 有 关 的 文件 ,包括 datafile、controlfile、 redolog、 
archived redolog ,initora. ora、configora. ora 全 部 备份 。 人 恢复 时 只 要 将 这 些 文件 放 回 从 前 的 目 
录 ,startup 数据 库 , 测 试 数据 库 是 否 运 行 正常 ,数据 是 否 得 到 完整 恢复 。 

(3) 联机 全 备份 和 日 志 备 份 测试 。 

设置 : 

initora. ora: log archive start = true 

configora. ora: log archive dest = /appl/oracle/oradata/orafe/arch/arch 


shutdown 数据 库 。 


svrmgrl 

SVRMGR > connect internal 

SVRMGR > startup mount 

SVRMGR > alter database archivelog|noarchivelog; 

SVRMGR > alter database open; 

可 用 archive log list 查看 状态 。 

步骤 : 

Oa 联机 全 备份 。 

数据 库 处 于 open 状态 ,依次 对 各 个 表 空 间 备份 。 

sqlplus system/system 

SQL > alter tablespace system begin backup; 

$ 复制 此 tablespace 各 个 datafile 

SQL > alter tablespace system end backup; 

注意 : 据 推测 begin backup 是 对 tablespace 冻结 写 入 ,end backup 是 解除 冻结 ,因此 复制 
datafile 的 过 程 不 宜 过 长 。 

备份 controlfile。 


SQL > alter database backup controlfile to ''; 
@ 日 志 备份 。 


sqlplus system/system 

SQL > alter system archive log stop; 

$ 移 去 日 志 目 录 下 的 所 有 archived redolog 

SQL > alter system archive log start; 

参见 范例 backup。 

恢复 : 

数据 库 处 于 shutdown。 

最 差 情况 : 磁盘 全 部 损坏 , 仅 保存 上 次 联机 全 备份 和 每 天 日 志 备份 。 

解决 硬件 故障 ,配置 系统 软件 及 环境 。oracle 用 户 , 将 全 备份 和 日 志 备 份 转移 至 相应 目 
录 , 根 据 configorax. ora 中 controlfile 的 配置 对 backup controlfile 改名 及 复制 。 


svrmgrl 

SVRMGR > connect internal 

SVRMGR > startup mount 

SVRMGR > recover database until cancel using backup controlfile; 


逐个 确认 待 恢复 的 archived redolog, 待 最 后 一 个 完成 后 ,输入 cancel, 使 恢复 结束 。 
SVRMGR > alter database open resetlogs; 


注意 : 应 尽快 做 一 次 热 备份 。 

丢失 某 数据 文件 。 

只 要 将 此 文件 从 上 次 联机 全 备份 中 复制 至 其 目录 ,并 将 自 上 次 联机 全 备份 以 来 所 有 日 志 
备份 移 至 归档 目录 。 

svrmgrl 

SVRMGR > connect internal 

SVRMGR > startup mount 

SVRMGR > alter database recover datafile 'path/file'; 或 者 简单 些 recover database; 

SVRMGR > alter database open; 

如 果 此 文件 损坏 或 丢失 ,又 无 备份 , 则 只 能 将 此 文件 脱 机 ,将 数据 export 出 来 ,重建 表 空 
间 ,再 import 进去 。 

svrmgrl 

SVRMGR > connect internal 

SVRMGR > startup mount 

SVRMGR > alter database datafile 'path/file' offline; 

SVRMGR > alter database open; 

2. 安全 性 测试 

1) 测试 内 容 

数据 库 的 安全 性 主要 是 指数 据 库 的 用 户 认证 方式 及 其 权限 管理 , 当 数 据 库 遭受 非法 用 户 
访问 时 ,系统 的 跟踪 与 审计 功能 等 。 具 体 的 测试 点 如 下 : 

。 用 户 及 口令 管理 。 包 括 用 户 定义 与 管理 ,角色 定义 与 管理 .口令 管理 等 。 

， 授 权 和 审计 管理 。 主 要 测试 点 为 数据 库 审计 ,授权 管理 ( 表 权限 / 列 权 限 )、 支 持 操作 系 

统 用 户 验证 方式 等 。 

2) 测试 方法 

采用 黑 盒 测试 方法 ,对 Windows 和 Linux 平台 上 的 数据 库 服 务 器 分 别 进行 测试 。 由 于 该 
部 分 测试 为 功能 验证 性 测试 ,因此 以 人 工 测试 为 主 。 


9.4 柑 和 人 式 系 统 测试 


9.4.1 府 入 式 系统 介绍 及 测试 基础 


1. 艇 入 式 系统 与 戏 入 式 操作 系统 

1) 嵌入 式 系 统 

典 入 式 系统 是 以 嵌入 式 计算 机 为 技术 核心 ,面向 用 户 、 面 向 产品 ` 面 向 应 用 , 软 硬 件 可 裁 
减 ,适用 于 对 功能 、 可 靠 性 \ 成 本 ,体积 、 功 耗 等 综合 性 能 有 严格 要 求 的 专用 计算 机 系统 。 


嵌入 式 系统 应 具有 的 特点 是 : 高 可 靠 性 ; 在 恶劣 的 环境 或 突然 断 电 的 情况 下 ,系统 仍然 
能 够 正常 工作 ; 许多 嵌入 式 应 用 要 求实 时 性 ,这 就 要 求 嵌入 式 操 作 系统 具有 实时 处 理 能 力 ; 
嵌入 式 系 统 和 具体 应 用 有 机 地 结合 在 一 起 , 它 的 升级 换代 也 是 和 具体 应 用 产品 同步 进行 的 ; 
嵌入 式 系统 中 的 软件 代码 要 求 高 质量 、 高 可 靠 性 ,一 般 都 固化 在 只 读 存储 器 中 或 闪存 中 ,也 就 
是 说 软件 要 求 固态 化 存储 ,而 不 是 存储 在 磁盘 等 载体 中 。 

2) 嵌入 式 操 作 系 统 

能 入 式 操作 系统 (Embedded Operating System,EOS) 是 一 种 用 途 广泛 的 系统 软件 ,过 去 
它 主 要 应 用 于 工业 控制 和 国防 系统 领域 。EOS 负责 内 入 系统 的 全 部 软 、 硬 件 资源 的 分 配 、 调 
度 作 业 ,控制 ,协调 并 发 活动 。 它 必须 体现 其 所 在 系统 的 特征 ,能 够 通过 装 外 某 些 模块 来 达到 
系统 所 要 求 的 功能 。 目 前 ,已 推出 一 些 应 用 比较 成 功 的 EOS 产品 系列 。 随 着 Internet 技术 的 
发 展 ,信息 家 电 的 普及 应 用 及 EOS 的 微型 化 和 专业 化 ,EOS 开始 从 单一 的 弱 功 能 向 高 专业 化 
的 强 功能 方向 发 展 。 嵌 人 式 操作 系统 在 系统 实时 高 效 性 、 硬 件 的 相关 依赖 性 软件 固化 以 及 应 
用 的 专用 性 等 方面 具有 较为 突出 的 特点 。EOS 是 相对 于 一 般 操 作 系统 而 言 的 , 它 除 具 备 了 一 
般 操 作 系统 最 基本 的 功能 ,如 任务 调度 .同步 机 制 . 中 断 处 理 ,文件 处 理 等 外 ,还 有 以 下 特点 : 

。 可 装卸 性 。 开 放 性 、 可 伸缩 性 的 体系 结构 。 

。 强 实时 性 。EOS 实时 性 一 般 较 强 ,可 用 于 各 种 设备 控制 当中 。 
统一 的 接口 。 提 供 各 种 设备 驱动 接口 。 
操作 方便 ,简单 ,提供 友好 的 GUI, 追 求 易学 易 用 。 
提供 强大 的 网 络 功 能 ,支持 TCP/IP 协议 及 其 他 协议 ,提供 TCP/UDP/IP/PPP 协议 
支持 及 统一 的 MAC 访问 层 接口 ,为 各 种 移动 计算 设备 预 留 接口 。 
强 稳定 性 , 弱 交 互 性 。 和 嵌入 式 系统 一 旦 开始 运行 就 不 需要 用 户 过 多 地 干预 ,这 就 要 负 
责 系统 管理 的 EOS 具有 较 强 的 稳定 性 。 骨 入 式 操作 系统 的 用 户 接口 一 般 不 提供 操作 
命令 , 它 通过 系统 的 调用 命令 向 用 户 程序 提供 服务 。 
固化 代码 。 在 嵌 人 式 系 统 中 ,嵌入 式 操 作 系统 和 应 用 软件 被 固化 在 嵌入 式 系统 计算 机 
的 ROM 中 。 辅 助 存储 器 在 嵌入 式 系统 中 很 少 使 用 ,因此 ,内 入 式 操 作 系统 的 文件 管 
理 功 能 应 该 能 够 很 容易 地 拆卸 ,而 用 各 种 内 存 文件 系统 。 
更 好 的 硬件 适应 性 ,也 就 是 良好 的 移植 性 。 

国际 上 用 于 信息 电器 的 租 入 式 操作 系统 有 40 种 左右 。 现 在 ,市 场 上 非常 流行 的 EOS 产 
品 ,包括 3Com 公司 下 属 子 公司 的 Palm OS, 全球 占有 份额 达 50%, Microsoft 公司 的 
Windows CE 不 过 占 29%。 在 美国 市 场 ,Palm OS 更 以 80% 的 占有 率 远 超 Windows CE。 开 
放 源 代码 的 Linux 很 适 于 做 信息 家 电 的 开发 。 比 如 ,中 科 红 旗 软 件 技术 有 限 公司 开发 的 红旗 
嵌入 式 Linux 和 美 商 网 虎 公司 开发 的 基于 Xlinux 的 嵌入 式 操作 系统 “夸克 ”。“ 夺 克 ” 是 目前 
全 世界 最 小 的 Linux, 它 有 两 个 很 突出 的 特点 ,就 是 体积 小 和 使 用 GCS 编码 。 

3 种 常用 的 嵌入 式 操 作 系 统 介 绍 如 下 。 

(1) Palm OS 。 

Palm 是 3Com 公司 的 产品 ,其 操作 系统 为 Palm OS。Palm OS 是 一 种 32 位 的 嵌入 式 操 
作 系 统 。Palm 提供 了 串 行 通信 接口 和 红外 线 传 输 接 口 ,利用 它 可 以 方便 地 与 其 他 外 部 设备 通 
信 传输 数据 ; 拥有 开放 的 OS 应 用 程序 接口 ,开发 商 可 根据 需要 自行 开发 所 需 的 应 用 程序 。 
Palm OS 是 一 套 具 有 开放 性 的 系统 ,现在 有 大 约 数 千 种 专门 为 Palm OS 编写 的 应 用 程序 ,从 
程序 内 容 上 来 看 ,小 到 个 人 管理 ,游戏 ,大 到 行业 解决 方案 ,Palm OS 无 所 不 包 。 在 丰富 的 软件 


支持 下 ,基于 Palm OS 的 掌上 计算 机 功能 得 以 不 断 扩 展 。 

Palm OS 是 一 套 专门 为 掌上 计算 机 开发 的 OS。 在 编写 程序 时 ,Palm OS 充分 考虑 了 掌上 
计算 机 内 存 相对 较 小 的 情况 ,因此 它 只 占有 非常 小 的 内 存 。 由 于 基于 Palm OS 编写 的 应 用 程 
序 占用 的 空间 也 非常 小 (通常 只 有 几 十 千 字 节 ) ,因此 基于 Palm OS 的 掌上 计算 机 (虽然 只 有 
几 兆 字 节 的 RAMD 可 以 运行 众多 应 用 程序 。 

由 于 Palm 产品 的 最 大 特点 是 使 用 简便 、 机 体 轻 巧 , 因 此 决定 了 Palm OS 应 具有 以 下 

。 操作 系统 的 节能 功能 。 由 于 掌上 计算 机 要 求 使 用 电源 尽 可 能 小 ,因此 在 Palm OS 的 应 
用 程序 中 ,如 果 没 有 事件 运行 , 则 系统 设备 进入 半 休 眠 (doze) 的 状态 ; 如 果 应 用 程序 停 

止 活动 一 段 时 间 , 则 系统 自动 进入 休眠 (sleep) 状 态 。 

。 合理 的 内 存 管理 。Palm 的 存储 器 全 部 是 可 读 写 的 快速 RAM, 动 态 RAM (Dynamic 
RAM) 类 似 于 PC 上 的 RAM, 它 为 全 局 变量 和 其 他 不 需 永 久保 存 的 数据 提供 临时 的 存 
储 空间 ; 存储 RAM(Storage RAM) 类 似 于 PC 上 的 硬盘 ,可 以 永久 保存 应 用 程序 和 
数据 。 

Palm OS 的 数据 是 以 数据 库 (database) 的 格式 来 存储 的 。 数 据 库 是 由 一 组 记录 (records) 
和 一 些 数据 库 头 信息 组 成 的 。 为 保证 程序 处 理 速度 和 存储 器 空间 ,在 处 理 数据 的 时 候 ,Palm 
OS 不 是 把 数据 从 存储 堆 (Storage Heap) 复 制 到 动态 堆 (Dynamic Heap) 后 再 进行 处 理 ,而 是 
在 存储 堆 中 直接 处 理 。 为 避免 错误 地 调用 存储 器 地 址 ,Palm OS 规定 这 一 切 都 必须 调用 其 内 
存 管理 器 里 的 API 来 实现 。 

Palm OS 与 同步 软件 (HotSync) 结 合 可 以 使 掌上 计算 机 与 PC 上 的 信息 实现 同步 ,把 台式 
机 的 功能 扩展 到 了 掌上 计算 机 。Palm 的 应 用 范围 相当 广泛 ,如 联络 及 工作 表 管 理 . 电 子 邮 件 
及 因特网 通信 、 销 售 人 员 及 组 别 自 动 化 等 。Palm 的 外 围 硬件 也 十 分 丰富 ,有 数码 相机 、GPS 
接收 器 .调制解调器 .GSM 无 线 电话 .数码 音频 播放 设备 ,便携 键盘 .语音 记录 器 ,条码 扫描 \ 无 
线 寻 呼 接收 器 和 探测 仪 。 其 中 Palm 与 GPS 结合 的 应 用 ,不 但 可 以 作 导 航 定位 ,还 可 以 结合 
GPS 作 气 候 的 监测 、 地 名 调查 等 。 

(2) Windows CE。 

Windows CE 是 微软 开发 的 一 个 开放 的 、 可 升级 的 32 位 嵌入 式 操作 系统 ,是 基于 掌上 型 
计算 机 类 的 电子 设备 操作 。Windows CE 的 图 形 用 户 界面 相当 出 色 。 其 中 CE 中 的 C 代表 袖 
珍 (Compact) ,消费 (Consumer) 、 通 信 能 力 (Connectivity) 和 伴侣 (Companion); E 代表 电子 产 
品 (Electronics)。Windows CE 是 由 微软 自行 开发 的 嵌入 式 新 型 操作 系统 ,是 基于 Win32 
API 重新 开发 的 、 新 型 的 信息 设备 平台 。Windows CE 具有 模块 化 .结构 化 和 基于 Win32 应 用 
程序 接口 以 及 与 处 理 器 无 关 等 特点 。Windows CE 不 仅 继承 了 传统 的 Windows 图 形 界面 ,并 
且 在 Windows CE 平台 上 可 以 使 用 Windows 98/XP 上 的 编程 工具 (如 Visual Basic、 Visual 
C++ 等 ) ,使 用 同样 的 函数 .同样 的 界面 网 格 ,使 绝 大 多 数 的 应 用 软件 只 需 简 单 的 修改 和 移植 就 
可 以 在 Windows CE 平台 上 继续 使 用 。 

Windows CE 的 设计 目标 是 模块 化 及 可 伸缩 性 、 实 时 性 能 好 ,通信 能力 强大 ,支持 多 种 
CPU。 它 的 设计 可 以 满足 多 种 设备 的 需要 ,这 些 设 备 包括 工业 控制 器 .通信 集线器 以 及 销售 
终端 之 类 的 企业 设备 ,还 有 像 照 相机 、 电 话 和 家 用 娱乐 器 材 之 类 的 消费 产品 。 一 个 典型 的 基于 
Windows CE 的 嵌入 系 统 通常 为 某 个 特定 用 途 而 设计 ,并 在 不 联机 的 情况 下 工作 。 它 要 求 所 
使 用 的 操作 系统 体积 较 小 ,内 建 有 对 中 断 的 响应 功能 。 


Windows CE 的 特点 : 

。 具有 灵活 的 电源 管理 功能 ,包括 瞬 眠 /唤醒 模式 。 

使 用 了 对 象 存储 (object store) 技 术 , 包 括 文件 系统 、 注 册 表 及 数据 库 。 它 还 具有 很 多 
高 性 能 、 高 效率 的 操作 系统 特性 ,包括 按 需 换 页 、 共 享 存储 、 交 又 处 理 同 步 、 支 持 大 容量 
堆 (heap) 等 。 

拥有 良好 的 通信 和 能力。 广泛 支持 各 种 通信 硬件 ,也 支持 直接 的 局 域 连接 以 及 拨号 连 
接 ,并 提供 与 PC、 内 部 网 以 及 Internet 的 连接 ,还 提供 与 Windows 9x/NT/XP 的 最 佳 
集成 和 通信 。 

支持 典 套 中 断 。 人 允许 更 高 优先 级 别 的 中 断 首 先 得 到 响应 ,而 不 是 等 待 低级 别 的 ISR 完 
成 ,这 使 得 该 操作 系统 具有 嵌入 式 操 作 系 统 所 要 求 的 实时 性 。 

更 好 的 线程 响应 能 力 。 对 高 级 别 IST( 中 断 服务 线程 ) 的 响应 时 间 上 限 的 要 求 更 加 严 
格 ,在 线程 响应 能 力 方面 的 改进 ,帮助 开发 人 员 掌 握 线程 转换 的 具体 时 间 , 并 通过 增强 
的 监控 能 力 和 对 硬件 的 控制 能 力 帮 助 他 们 创建 新 的 嵌入 式 应 用 程序 。 

256 个 优先 级 别 。 可 以 使 开发 人 员 在 控制 嵌入 式 系统 的 时 序 安排 方面 有 更 大 的 灵 
活性 。 

Windows CE 的 API 是 Win32 API 的 一 个 子 集 ,支持 近 1500 个 Win32 API。 有 了 这 些 
API, 足 可 以 编写 任何 复杂 的 应 用 程序 。 当 然 , 在 Windows CE 系统 中 ,所 提供 的 API 也 可 以 
随 具 体 应 用 的 需求 而 定 。 

在 掌上 型 计算 机 中 ,Windows CE 包含 如 下 一 些 重 要 组 件 : Pocket Outlook 及 其 组 件 . 语 
音 录音 机 、 移 动 频道 .远程 拨号 访问 .世界 时 钟 .计算 器 .多 种 输入 法 `.GBK 字符 集 、 中 文 TTF 
字库 英汉 双向 词典 袖珍 浏览 器 ,电子 邮件 ,Pocket Office、 系 统 设 置 、Windows CE Services 
软件 等 。 

(3) Linux。 

Linux 是 一 个 类 似 于 UNIX 的 操作 系统 。 它 起 源 于 芬兰 一 个 名 为 Linus Torvalds 的 业余 
爱好 ,但 是 现在 已 经 是 最 为 流行 的 一 款 开放 源 代码 的 操作 系统 。Linux 从 1991 年 问世 到 现 
在 ,20 年 的 时 间 内 已 发 展 成 为 一 个 功能 强大 、 设 计 完 善 的 操作 系统 ,伴随 网 络 技 术 进 步 而 发 展 
起 来 的 Linux OS 已 成 为 Microsoft 公司 Windows 的 强劲 对 手 。Linux 系统 不 仅 能 够 运行 于 
PC 平台 ,还 在 嵌入 式 系统 方面 大 放 光 芒 , 在 各 种 散 入 式 Linux OS 迅速 发 展 的 状况 下 ,Linux 
OS 逐渐 形成 了 可 与 Windows CE 等 EOS 进行 抗衡 的 局 面 。 目 前 正在 开发 的 苦 入 式 系统 中 ， 
49% 的 项 目 选 择 Linux 作为 嵌 和 人 式 操作 系统 。Linux 现 已 成 为 嵌入 式 操作 的 理想 选择 。 

国内 中 科 红 旗 软 件 技 术 有 限 公司 开发 的 红旗 骨 和 人 式 Linux 具有 一 定 的 竞争 力 ,先后 推出 
了 PDA\ 机 顶 盒 、 瘦 客户 端 , 交 换 机 用 的 嵌入 式 Linux 系统 ,并 且 投 入 了 实际 应 用 。 现 以 红旗 
嵌入 式 Linux 为 例 来 讲解 嵌入 式 Linux OS 的 特点 : 

。 精简 的 内 核 , 性 能 高 .稳定 ,多 任务 。 

。 适用 于 不 同 的 CPU, 支 持 多 种 体系 结构 ,如 X86、ARM、MIPS、ALPHA 和 SPARC 等 。 

。 能 够 提供 完善 的 嵌入 式 GUI 以 及 蛙 入 式 X-Windows。 
提供 嵌入 式 浏览 器 ,邮件 程序 .MP3 播放 器 .MPEG 播放 器 .记事 本 等 应 用 程序 。 
提供 完整 的 开发 工具 和 SDK ,同时 提供 PC 上 的 开发 版 本 。 

用 户 可 定制 ,可 提供 图 形 化 的 定制 和 配置 工具 。 
常用 嵌入 式 芯片 的 驱动 集 , 支 持 大量 的 周边 硬件 设备 ,驱动 丰富 。 


针对 嵌入 式 的 存储 方案 ,提供 实时 版 本 和 完善 的 说 入 式 解 决 方案 。 
完善 的 中 文 支持 ,强大 的 技术 支持 ,完整 的 文档 。 
开放 源码 ,丰富 的 软件 资源 ,广泛 的 软件 开发 者 的 支持 ,价格 低廉 ,结构 灵活 ,适用 
面 广 。 

(4) 嵌入 式 操作 系统 比较 。 

Linux OS 与 Windows Ce 的 比较 : 

嵌入 式 Linux OS 与 Windows CE 相 比 的 优点 : 第 一 ,Linux 是 开放 源 代码 的 ,不 存在 黑 
箱 技术 ,遍布 全 球 的 众多 Linux 爱好 者 都 是 Linux 开发 者 的 强大 技术 支持 者 ; 而 Windows 
CE 是 非 开放 性 OS, 使 第 三 方 很 难 实现 产品 定制 。 第 二 ,Linux 的 源 代码 随处 可 得 ,注释 丰富 ， 
文档 齐全 ,易于 解决 各 种 问题 。 第 三 ,Linux 的 内 核 小 ,效率 高 ; 而 Windows CE 在 这 方面 是 
笨拙 的 ,占用 过 多 的 RAM ,应 用 程序 庞大 。 第 四 ,Linux 是 开放 源 代码 的 OS, 在 价格 上 极 具 竞 
争 力 ,适合 中 国 国情 。Windows CE 的 版 权 费 用 是 厂家 不 得 不 考虑 的 因素 。 第 五 ,Linux 不 仅 
支持 x86 芯片 ,还 是 一 个 跨 平台 的 系统 。 到 目前 为 止 , 它 可 以 支持 20 一 30 种 CPU ,很 多 CPU 
(包括 家 电 业 的 芯片 ) 厂 商都 开始 做 Linux 的 平台 移植 工作 ,而 且 移 植 的 速度 远 远 超过 Java 的 
开发 环境 。 如 果 现 在 采用 Linux 环境 开发 产品 ,那么 将 来 更 换 CPU 时 就 不 会 遇 到 更 换 平台 的 
困扰 。 第 六 ,Linux 内 核 的 结构 在 网 络 方面 是 非常 完整 的 , 它 提 供 了 对 包括 十 兆 位 、 百 兆 位 及 
千 兆 位 的 以 太 网 络 ,还 有 无 线 网 络 .Token ring( 令 牌 环 ) 和 光纤 甚至 卫星 的 支持 。 第 七 ,Linux 
在 内 核 结构 的 设计 中 考虑 适应 系统 的 可 裁减 性 的 要 求 , Windows CE 在 内 核 结 构 的 设计 中 并 
未 考虑 适应 系统 的 高 度 可 裁减 性 的 要 求 。 

典 入 式 Linux OS 与 Windows CE 相 比 的 弱点 : 第 一 ,开发 难度 较 高 ,需要 很 高 的 技术 实 
力 。 第 二 ,核心 调试 工具 不 全 ,调试 不 太 方便 , 尚 没有 很 好 的 用 户 图 形 界 面 。 第 三 ,与 某 些 商业 
OS 一 样 , 肉 入 式 Linux 占用 较 大 的 内 存 , 当然, 人 们 可 以 去 掉 部 分 无 用 的 功能 来 减 小 使 用 的 
内 存 , 但 是 如 果 不 仔细 ,将 引起 新 的 问题 。 第 四 ,有 些 Linux 的 应 用 程序 需要 虚拟 内 存 , 而 肉 入 
式 系统 中 并 没有 或 不 需要 虚拟 内 存 , 所 以 并 非 所 有 的 Linux 应 用 程序 都 可 以 在 嵌入 式 系统 中 
运行 。 

Palm OS 与 Windows CE 的 比较 : 

3Com 公司 的 Palm OS 是 掌上 计算 机 市 场 中 较为 优秀 的 戏 入 式 操 作 系统 , 是 针对 这 一 市 
场 专门 设计 的 系统 。 它 有 开放 的 操作 系统 应 用 程序 接口 (API) ,支持 开发 商 根据 需要 自行 开 
发 所 需 的 应 用 程序 ,具有 十 分 丰富 的 应 用 程序 。 在 掌上 计算 机 市 场 上 独占 其 霸主 地 位 已 入。 

从 技术 层面 上 讲 , Palm OS 是 一 套 专门 为 掌上 计算 机 开发 的 操作 系统 ,具有 许多 
Windows CE 无 法 比拟 的 优势 ; Windows CE 过 于 腾 肿 ,不 适合 应 用 在 廉价 的 掌上 计算 机 中 。 

Palm OS 是 一 套 具 有 极 强 开放 性 的 系统 。 开 发 者 向 用 户 免费 提供 Palm OS 的 开发 工具 ， 
允许 用 户 利用 该 工具 在 Palm OS 基础 上 方便 地 编写 、 修 改 相关 软件 。 与 之 相 比 , Windows CE 
的 开发 工具 就 显得 复杂 多 了 .这 使 得 一 般 用 户 很 难 掌 握 。 这 也 是 Palm OS 与 Windows CE 的 
另 一 个 主要 区 别 。 

我 们 从 常用 EOS 的 大 小 .可 开发 定制 、 互 操作 性 、 通 用 性 、 实 时 性 及 应 用 领域 几 个 方面 归 
纳 如 下 : 

Palm OS、Windows CE、Linux 这 3 种 嵌入 式 操作 系统 各 有 不 同 的 特点 ,不 同 的 用 途 , 但 
Linux 比 Palm OS 和 Windows CE 更 小 .更 稳定 ,而 且 Linux 是 开放 的 OS, 在 价格 上 极 具 竞争 
力 。 如 今 整 个 市 场 尚未 成 型 ,嵌入 式 操作 系统 也 未 形成 统一 的 国际 标准 ,而且 Linux 的 一 系列 


特征 又 为 我 们 开发 国产 的 嵌入 式 操作 系统 提供 了 方便 ,因此 ,我 们 有 机 会 在 这 个 未 成 熟 的 市 场 
上 占有 一 席 之 地 。 

2. 嵌入 式 测试 方法 概要 

嵌入 式 软件 测试 / 府 入 式 测试 或 叫 交 叉 测试 (cross-test) 的 目的 与 非 府 入 式 软件 是 相同 
的 。 但 是 ,在 嵌入 式 系统 设计 中 ,软件 正 越 来 越 多 地 取代 硬件 ,以 降低 系统 的 成 本 ,获得 更 大 的 
灵活 性 ,这 就 需要 使 用 更 好 的 测试 方法 和 工具 进行 嵌入 式 和 实时 软件 的 测试 。 戏 入 式 软件 测 
试 的 目的 是 保证 系统 满足 需求 规格 说 明 。 舱 和 人 式 系统 的 失效 即 系统 没有 满足 一 个 或 多 个 正式 
需求 规范 中 所 规定 的 需求 项 。 散 入 式 系统 有 其 特殊 的 失效 判定 准则 。 

通常 艇 入 式 系统 对 可 靠 性 的 要 求 比 较 高 。 典 入 式 系统 安全 性 的 失效 可 能 会 导致 灾难 性 的 
后 果 , 即 使 是 非 安全 性 系统 ,由 于 大 批量 生产 也 会 导致 严重 的 经 济 损失 。 这 就 要 求 对 众人 入 式 系 
统 , 包 括 散 入 式 软件 进行 严格 的 测试 .确认 和 验证 。 随 着 越 来 越 多 的 领域 使 用 软件 和 微 处 理 器 
控制 各 种 嵌入 式 设备 ,对 复杂 的 散人 入 式 软件 进行 快速 有 效 的 测试 越 加 显得 重要 。 一 般 来 说 , 揪 
入 式 软件 测试 在 4 个 阶段 上 进行 , 即 单元 测试 ,软件 集成 测试 .硬件 /软件 集成 测试 和 系统 集成 
测试 。 其 中 的 硬件 /软件 集成 测试 阶段 是 嵌入 式 软件 所 特有 的 ,目的 是 验证 能 入 式 软件 与 其 所 
控制 的 硬件 设备 能 否 正 确 地 交互 。 

软件 测试 有 两 种 基本 的 方式 , 即 白 盒 测试 方法 与 黑 盒 测试 方法 ,嵌入 式 软件 测试 也 不 
例外 。 

白 盒 测试 或 基本 代码 的 测试 是 检查 程序 的 内 部 设计 。 根 据 源 代码 的 组 织 结构 查找 软件 缺 
陷 ,一 般 要 求 测试 人 员 对 软件 的 结构 和 作用 有 详细 的 了 解 , 白 盒 测试 与 代码 覆盖 率 密 切 相 关 ， 
可 以 在 白 盒 测 试 的 同时 计算 出 测试 的 代码 覆盖 率 , 保 证 测试 的 充分 性 。 把 100% 的 代码 都 测 
试 到 几乎 是 不 可 能 的 ,所 以 要 选择 最 重要 的 代码 进行 白 盒 测试 。 由 于 严格 的 安全 性 和 可 靠 性 
的 要 求 , 嵌 入 式 软件 测试 同 非 嵌 入 式 软件 测试 相 比 ,通常 要 求 有 更 高 的 代码 覆盖 率 。 对 于 骨 人 
式 软件 , 白 盒 测 试 一 般 不 必 在 目标 硬件 上 进行 ,更 为 实际 的 方式 是 在 开发 环境 中 通过 硬件 仿真 
进行 ,所 以 选取 的 测试 工具 应 该 支持 在 宿主 环境 中 的 测试 。 

黑 盒 测 试 也 称 为 功能 测试 。 这 类 测试 方法 根据 软件 的 用 途 和 外 部 特征 查找 软件 缺陷 ,不 
需要 了 解 程序 的 内 部 结构 。 黑 盒 测 试 最 大 的 优势 在 于 不 依赖 代码 ,而 是 从 实际 使 用 的 角度 进 
行 测试 ,通过 黑 盒 测试 可 以 发 现 白 盒 测试 发 现 不 了 的 问题 。 因 为 黑 盒 测 试 与 需求 紧密 相关 , 需 
求 规格 说 明 的 质量 会 直接 影响 测试 的 结果 , 黑 盒 测 试 只 能 限制 在 需求 的 范围 内 进行 。 在 进行 
嵌入 式 软件 黑 盒 测试 时 ,要 把 系统 的 预期 用 途 作为 重要 依据 ,根据 需求 中 对 负载 .定时 、 性 能 的 
要 求 ,判断 软件 是 否 满足 这 些 需求 规范 。 为 了 保证 正确 地 测试 ,还 需要 检验 软 硬 件 之 间 的 接 
口 。 风 入 式 软 件 黑 盒 测试 的 一 个 重要 方面 是 极限 测试 。 在 使 用 环境 中 ,通常 要 求 嵌入 式 软 件 
的 失效 过 程 要 平稳 ,所 以 , 黑 盒 测 试 不 仅 要 检查 软件 工作 过 程 ,还 要 检查 软件 失效 过 程 。 

目标 环境 测试 和 宿主 环境 测试 。 在 嵌入 式 软件 测试 中 ,常常 要 在 基于 目标 的 测试 和 基于 
宿主 的 测试 之 间 做 出 折衷 。 基 于 目标 的 测试 消耗 较 多 的 经 费 和 时 间 ,而 基于 宿主 的 测试 代价 
较 小 ,但 毕竟 是 在 模拟 环境 中 进行 的 。 目 前 的 趋势 是 把 更 多 的 测试 转移 到 宿主 环境 中 进行 ,但 
是 ,目标 环境 的 复杂 性 和 独特 性 不 可 能 完全 模拟 。 

在 两 个 环境 中 可 以 出 现 不 同 的 软件 缺陷 ,重要 的 是 目标 环境 和 宿主 环境 的 测试 内 容 有 所 
选择 。 在 宿主 环境 中 ,可 以 进行 逻辑 或 界面 的 测试 ,以 及 与 硬件 无 关 的 测试 。 在 模拟 或 宿主 环 
境 中 的 测试 消耗 时 间 通 常 相对 较 少 ,用 调试 工具 可 以 更 快 地 完成 调试 和 测试 任务 。 而 与 定时 
问题 有 关 的 白 盒 测试 ,中断 测 试 、 硬 件 接口 测试 只 能 在 目标 环境 中 进行 。 在 软件 测试 周期 中 ， 


基于 目标 的 测试 是 在 较 晚 的 “硬件 /软件 集成 测试 ”阶段 开始 的 ,如 果 不 更 早 地 在 模拟 环境 中 进 
行 白 盒 测 试 ,而 是 等 到 “硬件 /软件 集成 测试 "阶段 进行 全 部 的 白 盒 测试 ,将 耗费 更 多 的 财力 和 
人 力 。 


9.4.2 藤 入 式 测试 策略 


随 着 嵌入 式 领域 目标 系统 的 应 用 日 趋 复杂 ,硬件 的 稳定 性 越 来 越 高 ,而 软件 故障 却 日 益 突 
出 ,同时 由 于 竞争 .开发 技术 日 新 月 异 等 因素 导致 嵌入 式 产品 上 市 时 间 缩 短 ,对 产品 的 质量 要 
求 也 越 来 越 高 ,因此 软件 的 重要 性 和 质量 引起 人 们 的 高 度 重视 , 越 来 越 多 的 人 认识 到 柑 入 式 系 
统 的 测试 势 在 必 行 。 

对 于 一 般 商 用 软件 的 测试 ,嵌入 式 软件 测试 有 其 自身 的 特点 和 测试 困难 。 由 于 嵌入 式 系 
统 的 自身 特点 ,如 实时 性 (Real-timing) ,内存 不 丰富 ,I/O 通道 少 ,开发 工具 昂贵 ,并 且 与 硬件 
紧密 相关 的 CPU 种 类 繁多 等 ,嵌入 式 软件 的 开发 和 测试 也 就 与 一 般 商 用 软件 的 开发 和 测试 
策略 有 了 很 大 的 不 同 , 可 以 说 蔡 入 式 软件 是 最 难 测 试 的 一 种 软件 。 

藤 人 式 软件 测试 使 用 有 效 的 测试 策略 是 唯一 的 出 路 , 它 可 以 使 开发 的 效率 最 大 化 ,避免 目 
标 系统 的 瓶 球 ,使 用 在 线 仿真 器 可 以 节省 昂贵 的 目标 资源 。 自 从 出 现 高 级 语言 后 ,开发 环境 与 
最 终 运 行 环境 通常 都 是 存在 差异 的 , 蔡 入 式 系统 更 是 如 此 。 开 发 环境 被 认为 是 主机 或 宿主 平 
台 ,软件 运行 环境 为 目标 平台 。 

讨论 嵌入 式 软件 测试 首先 就 会 遇 到 一 个 问题 : 为 什么 不 把 所 有 测试 都 放 在 目标 上 进行 
呢 ? 如 果 所 有 测试 都 放 在 目标 平台 上 有 很 多 不 利 的 因素 : 

。 测试 的 软件 可 能 会 与 开发 者 争夺 时 间 ,应 避免 测试 只 在 目标 环境 中 进行 。 

。 目标 环境 可 能 还 不 可 行 。 

。 比 起 主机 平台 环境 ,目标 环境 通常 是 不 精密 的 和 不 方便 的 。 

。 提供 给 开发 者 的 目标 环境 和 联合 开发 环境 通常 是 很 昂贵 的 。 

。 目标 环境 存在 持续 的 应 用 ,开发 和 测试 工作 可 能 会 妨碍 存在 的 应 用 。 

从 经 济 上 和 开发 效率 上 考虑 ,软件 开发 周期 中 的 工作 尽 可 能 地 在 主机 系统 环境 中 进行 ,其 
中 包括 测试 。 

确定 主机 和 目标 测试 环境 后 ,开发 测试 人 员 又 会 遇 到 以 下 的 问题 : 

多 少 开 发 人 员 会 卷 人 测试 工作 (单元 测试 ,软件 集成 ,系统 测试 )? 
多 少 软件 应 该 测试 ? 测试 会 花费 多 长 时 间 ? 

在 主机 环境 和 目标 环境 有 哪些 软件 工具 ? 价格 怎样 ? 是 否 适 合 ? 
多 少 目 标 环境 可 以 提供 给 开发 者 ? 什么 时 候 提 供 ? 

主机 和 目标 机 之 间 的 连接 怎样 ? 

被 测 软 件 下 载 到 目标 机 有 多 快 ? 

使 用 主机 与 目标 环境 之 间 有 什么 限制 (如 软件 安全 标准 )? 

任何 人 或 组 织 进行 嵌入 式 软件 的 测试 都 应 深入 考虑 以 上 问题 ,结合 自身 实际 情况 , 选 定 合 
理 测试 策略 和 方案 。 对 于 嵌入 式 软件 测试 ,在 测试 的 各 个 阶段 有 着 通用 的 策略 。 

(1) 单元 测试 。 所 有 单元 级 测试 都 可 以 在 主机 环境 上 进行 ,除非 少数 情况 ,特别 具体 指定 
了 单元 测试 直接 在 目标 环境 进行 。 最 大 化 在 主机 环境 进行 软件 测试 的 比例 。 

在 主机 平台 上 运行 测试 速度 比 在 目标 平台 上 快 得 多 , 当 在 主机 平台 完成 测试 后 ,可 以 在 目 


标 环境 上 重复 做 简单 的 确认 测试 ,目的 是 验证 在 主机 和 目标 机 上 的 运行 是 否 一 致 。 在 目标 环 
境 上 进行 确认 测试 将 确定 一 些 未知 的 、 未 预料 到 的 、 未 说明 的 主机 与 目标 机 的 不 同 。 例 如 , 目 
标 编译 器 可 能 有 错误 或 缺陷 ,但 在 主机 编译 器 上 不 存在 这 个 问题 。 

(2) 集成 测试 。 软 件 集成 也 可 在 主机 环境 上 完成 ,在 主机 平台 上 模拟 目标 环境 运行 ,当然 
在 目标 环境 上 重复 测试 也 是 必须 的 ,在 此 级 别 上 的 确认 测试 将 确定 一 些 环 境 上 的 问题 ,如 内 存 
定位 和 分 配 上 的 一 些 错误 。 在 主机 环境 上 进行 集成 测试 ,依赖 于 目标 系统 的 具体 功能 有 多 少 。 
有 些 能 入 式 系统 与 目标 环境 耦合 得 非常 紧密 , 若 在 主机 环境 做 集成 是 不 切实 际 的 。 一 个 大 型 
软件 的 开发 可 以 分 几 个 级 别 的 集成 。 低 级 别 的 软件 集成 在 主机 平台 上 完成 有 很 大 优势 , 越 往 
后 的 集成 越 依赖 于 目标 环境 。 

(3) 系统 测试 和 确认 测试 。 所 有 的 系统 测试 和 确认 测试 必须 在 目标 环境 下 执行 。 当 然 ， 
在 主机 上 开发 和 执行 系统 测试 ,然后 移植 到 目标 环境 重复 执行 是 很 方便 的 。 对 目标 系统 的 依 
赖 性 会 妨碍 将 主机 环境 上 的 系统 测试 移植 到 目标 系统 上 ,况且 只 有 少数 开发 者 会 卷 人 系统 测 
试 ,所 以 有 时 放弃 在 主机 环境 上 执行 系统 测试 可 能 更 方便 。 

确认 测试 最 终 的 实施 必须 在 目标 环境 中 ,系统 的 确认 必须 在 真实 系统 之 下 测试 ,而 不 能 在 
主机 环境 下 模拟 。 这 关系 到 嵌入 式 软件 的 最 终 使 用 。 包 括 恢复 测试 .安全 测试 .强度 测试 和 性 
能 测试 等 。 

使 用 有 效 的 测试 工具 可 极 大 地 提高 嵌入 式 软件 测试 的 水 平和 效率 ,嵌入 式 系统 测试 的 
策略 : 

(1) 使 用 测试 工具 的 插 装 功能 (主机 环境 ) 执 行 静 态 测 试 分 析 , 并 且 为 动态 覆盖 测试 准备 
好 插 装 软件 代码 。 

(2) 使 用 源码 在 主机 环境 执行 功能 测试 ,修正 软件 的 错误 和 测试 脚本 中 的 错误 。 

(3) 使 用 插 装 后 的 软件 代码 执行 覆盖 率 测试 ,添加 测试 用 例 或 修正 软件 的 错误 ,保证 达到 
所 要 求 的 覆盖 率 目 标 。 

(4) 在 目标 环境 下 重复 (2) ,确认 软件 在 目标 环境 中 执行 测试 的 正确 性 。 

(5) 若 测试 需要 达到 极端 的 完整 性 ,最 好 在 目标 系统 上 重复 (3), 确 定 软件 的 覆盖 率 没有 

通常 在 主机 环境 执行 大 多 数 的 测试 ,只 是 在 最 终 确 定 测试 结果 和 最 后 的 系统 测试 才 移植 
到 目标 环境 ,这 样 可 以 避免 发 生 访问 目标 系统 资源 上 的 瓶 贷 ,也 可 以 减少 在 昂贵 资源 ,如 在 线 
仿真 器 上 的 费用 。 另 外 , 若 目标 系统 的 硬件 由 于 某 种 原因 而 不 能 使 用 时 ,最 后 的 确认 测试 可 以 
推迟 直到 目标 硬件 可 用 ,这 为 戏 入 式 软件 的 开发 测试 提供 了 弹性 。 上 面 所 提 到 的 测试 工具 都 
可 以 通过 各 自 的 方式 提供 测试 在 主机 与 目标 之 间 的 移植 ,从 而 使 嵌入 式 软件 的 测试 得 以 方便 
地 执行 。 

使 用 有 效 的 嵌入 式 测试 策略 可 极 大 地 提高 嵌入 式 软件 测试 的 水 平和 效率 ,提高 嵌入 式 软 
件 的 质量 。 

在 进行 嵌入 式 测 试 中 ,主机 环境 和 目标 环境 的 连接 通常 有 直接 连接 方法 ,通过 仿真 器 连 
接 ,使 用 介质 进行 间接 连接 ,使 用 PROM 等 传递 被 测 软件 ,测试 的 交互 界面 ,无 交互 界面 的 
连接 。 

除了 基本 的 戏 人 式 软件 测试 策略 外 ,对 于 嵌入 式 测试 提出 如 下 建议 : 


(1) 使 用 工具 。 

就 像 修 车 需要 工具 一 样 ,好 的 程序 员 应 该 能 够 熟练 运用 各 种 软件 工具 。 不 同 的 工具 ,有 不 
同 的 使 用 范围 ,有 不 同 的 功能 。 使 用 这 些 工具 ,可 以 看 到 系统 在 干 些 什么 , 它 又 占用 什么 资源 ， 
它 到 底 和 哪些 外 界 的 东西 打交道 。 难 以 解决 的 问题 可 能 通过 某 个 工具 就 能 轻松 解决 。 在 嵌入 
式 测 试 中 不 愿意 使 用 工具 有 两 个 主要 原因 : 一 个 是 害怕 , 男 一 个 是 惰性 。 害 怕 是 因为 怕 使 
测试 工具 可 能 引入 新 的 错误 ,所 以 总 喜欢 寄 希 望 于 通过 不 断 地 修改 重 编译 代码 来 消除 bug, 结 
果 效 果 不 佳 。 懒 惰 是 因为 习惯 了 使 用 printf 之 类 的 简单 测试 手段 。 

(2) 尽早 发 现 内 存 问题 。 

对 于 嵌入 式 系统 ,内 存 问 题 危 害 很 大 ,不 容易 排查 ,主要 有 3 种 类 型 : 内 存 泄露 .内存 碎 片 
和 内 存 崩溃 。 对 于 内 存 问题 ,态度 必须 要 明确 , 那 就 是 时 发 现 早 处 理 。 在 软件 设计 中 ,内 存 泄 
露 主要 是 由 于 不 断 分 配 的 内 存 无 法 及 时 地 被 释放 引起 ,久而久之 ,系统 的 内 存 耗 尽 。 即 使 细心 
的 编程 高 手 有 时 也 会 遭遇 内 存 泄露 问题 。 如 果 测 试 中 遇 到 过 内 存 泄露 的 情况 应 该 有 深刻 的 体 
验 , 那 就 是 内 存 泄 露 问题 一 般 隐 藏 很 深 , 很 难 通 过 代码 阅读 来 发 现 。 有 些 内 存 泄露 甚至 可 能 出 
现在 库 当 中 。 有 可 能 这 本 身 是 库 中 的 bug, 也 有 可 能 是 因为 程序 员 没 有 正确 理解 它们 的 接口 
说 明文 档 造成 错 用 。 

在 很 多 时 候 , 大 多 数 的 内 存 泄露 问题 无 法 探测 ,但 可 能 表现 为 随机 的 故障 。 程 序 员 们 往往 
会 把 这 种 现象 怪罪 于 硬件 问题 。 如 果 用 户 对 系统 稳定 性 要 求 不 是 很 高 ,那么 重启 系统 问题 也 
不 大 ; 但 是 如 果 用 户 对 系统 稳定 性 要 求 很 高 ,那么 这 种 故障 就 有 可 能 使 用 户 对 产品 失去 信心 ， 
同时 也 意味 着 该 项 目 是 个 失败 的 项 目 。 由 于 内 存 泄露 危害 巨大 ,现在 已 经 有 许多 工具 来 解决 
这 个 问题 。 这 些 工 具 通 过 查找 没有 引用 或 重复 使 用 的 代码 块 , 垃 圾 内 存 收 集 . 库 跟踪 等 技术 来 
发 现 内 存 泄露 的 问题 。 每 个 工具 都 有 利 有 贞 ,不 过 总 的 来 说 ,用 要 比 不 用 好 。 总 之 ,负责 的 开 
发 人 员 应 该 关注 内 存 泄 露 的 问题 ,做 到 防 患 于 未 然 。 

内 存 碎 片 比 内 存 泄露 隐藏 还 要 深 。 随 着 内 存 的 不 断 分 配 并 释放 ,大 块 内 存 不 断 分 解 为 小 
块 内 存 , 从 而 形成 碎片 ,久而久之 , 当 需 要 申请 大 块 内 存 时 ,有 可 能 就 会 失败 。 如 果 系 统 内 存 够 
大 ,那么 坚持 的 时 间 会 长 一 些 ,但 最 终 还 是 逃 不 出 分 配 失败 的 厄运 。 在 使 用 动态 分 配 的 系统 
中 ,内 存 碎片 经 常 发 生 。 目 前 ,解决 这 个 问题 最 有 效 的 方法 就 是 使 用 工具 通过 显示 系统 中 内 存 
的 使 用 情况 来 发 现 谁 是 导致 内 存 碎片 的 罪 购 祸首 ,然后 改进 相应 的 部 分 。 

由 于 动态 内 存 管理 的 种 种 问题 ,在 嵌入 式 应 用 中 ,很 多 公司 干脆 就 禁用 malloc/free, 以 绝 
后 患 。 
内 存 崩溃 是 内 存 使 用 最 严重 的 结果 ,主要 原因 有 数组 访问 越界 . 写 已 经 释放 的 内 存 、 指 针 
计算 错误 及 访问 堆栈 地 址 越界 等 。 这 种 内 存 崩 溃 造 成 系统 故障 是 随机 的 ,而 且 很 难 查找 ,目前 
提供 用 于 排查 的 工具 也 很 少 。 

总 之 ,如 果 要 使 用 内 存 管 理 单元 的 话 ,必须 要 小 心 ,并 严格 遵守 它们 的 使 用 规则 ,比如 谁 分 
配 谁 释放 等 。 

(3) 关注 代码 优化 。 

讲 到 系统 稳定 性 ,人 们 更 多 地 会 想到 实时 性 和 速度 ,因为 代码 效率 对 嵌入 式 系统 来 说 太 重 
要 了 。 知 道 怎么 优化 代码 是 每 个 嵌入 式 软件 开发 人 员 必 须 具 备 的 技能 。 代 码 优化 的 前 提 是 找 
到 真正 需要 优化 的 地 方 , 然 后 对 症 下 药 , 优 化 相应 部 分 的 代码 。 如 profile( 性 能 分 析 工 具 , 一 些 
功能 齐全 的 IDE 都 提供 这 种 内 置 的 工具 ?能 够 记录 各 种 情况 ,比如 各 个 任务 的 CPU 占用 率 、 
各 个 任务 的 优先 级 是 否 分 配 妥 当 、 某 个 数据 被 复制 了 多 少 次 .访问 磁盘 多 少 次 ,是否 调用 了 网 


络 收 发 的 程序 ,测试 代码 是 否 已 经 关闭 等 。 但 是 ,profile 工具 在 分 析 实 时 系统 性 能 方面 还 是 
有 不 够 的 地 方 。 一 方面 ,人 们 使 用 profile 工具 往往 是 在 系统 出 现 问 题 即 CPU 耗 尽 之 后 ,而 
profile 工具 本 身 对 CPU 占用 较 大 ,所 以 profile 对 这 种 情况 很 可 能 不 起 作用 。 根 据 
Heisenberg 效应 ,任何 测试 手段 或 多 或 少 都 会 改变 系统 运行 ,这 个 对 profiler 同样 适用 。 总 
之 ,提高 运行 效率 的 前 提 是 必须 要 知道 CPU 到 底 干 了 些 什么 ? 干 得 怎么 样 ? 

(4) 重 现 并 隔离 问题 。 

对 于 模块 独立 性 好 的 嵌入 式 系统 软件 ,使 用 隔离 方法 往往 是 对 付 那些 隐藏 极 深 bug 的 最 
好 方法 。 如 果 问 题 的 出 现 是 间 欣 性 的 ,有 必要 设法 去 重 现 它 并 记录 使 其 重 现 的 整个 过 程 ,以 备 
在 下 一 次 可 以 利用 这 些 条 件 去 重 现 问题 。 如 果 确 信 可 以 使 用 记录 的 那些 条 件 去 重 现 问题 , 那 
么 就 可 以 着 手 去 隔离 问题 。 怎 么 隔离 呢 ? 可 以 用 #ifdef 把 一 些 可 能 和 问题 无 关 的 代码 关闭 ， 
把 系统 最 小 化 到 仍 能 够 重 现 问 题 的 地 步 。 如 果 还 是 无 法 定位 问题 所 在 ,那么 有 必要 打开 “工具 
箱 ” 了 。 可 以 试 着 用 ICE 或 数据 监视 器 去 查看 某 个 可 疑 变 量 的 变化 ; 可 以 使 用 跟踪 工具 获得 
函数 调用 的 情况 ,包括 参数 的 传递 ; 检查 内 存 是 否 崩 浊 以 及 堆栈 溢出 的 问题 。 

(5) 测试 过 程 中 注意 使 用 版 本 控制 工具 。 

对 代码 进行 注释 或 进行 修改 标记 对 将 来 代码 出 现 问题 之 后 的 查找 或 调试 有 很 大 帮助 。 假 
如 有 一 天 ,最 近 一 次 修改 的 程序 运行 很 久之 后 忽然 down 了 ,那么 这 时 的 第 一 反应 就 是 代码 到 
底 哪 个 地 方 出 问题 了 。 另 外 ,不 同时 间 的 修改 内 容 有 什么 不 同 ,是 否 有 交叉 并 互相 覆盖 ,是 否 
有 其 他 程序 员 做 修改 等 。 这 时 代码 版 本 控制 工具 如 CVS、SVN 或 Clearcase 等 将 起 到 重要 的 
作用 ,可 以 将 上 个 版 本 check in 和 当前 测试 版 本 比较 。 比 较 的 工具 可 以 是 工具 自 带 的 ,如 
CVS 的 diff 工具 或 其 他 功能 更 强 的 比较 工具 ,比如 Beyond Compare 和 Exam Diff。 通 过 比 
较 , 记 录 所 有 改动 的 代码 ,分 析 所 有 可 能 导致 问题 的 可 疑 代码 。 

(6) 确定 测试 的 完整 性 。 

如 何 知 道 测试 有 多 全 面 呢 ? 白 盒 覆盖 测试 可 以 回答 这 个 问题 。 肉 入 式 系统 对 覆盖 要 求 较 
高 。 履 盖 测 试 工具 可 以 告诉 CPU 到 底 执行 了 哪些 代码 。 好 的 覆盖 工具 通常 可 以 显示 覆盖 
率 ,如 覆盖 了 20% 一 40% 的 代码 没有 问题 ,而 其 余 的 可 能 存在 bug。 覆 盖 工 具有 不 同 的 测试 级 
别 , 用 户 可 以 根据 自己 的 需要 选择 某 个 级 别 。 即 使 确定 单元 测试 已 经 很 全 面 并 且 没 有 dead 
code, 覆 盖 工 具 还 是 可 能 找 出 一 些 潜在 的 问题 ,看 下 面 的 代码 : 


if(i>= 0&S&(almosthlwaysZero==0| (last=i))) 


如 果 almostAlwaysZero 为 非 0, 那 么 last=i 赋值 语句 就 被 跳 过 ,这 可 能 不 是 所 期 望 的 。 
这 种 问题 通过 覆盖 工具 的 条 件 覆 盖 测 试 功能 可 以 轻松 地 被 发 现 。 总 之 ,覆盖 测试 对 于 提高 代 
码 质量 很 有 帮助 。 

(7) 提高 代码 质量 意味 着 节省 时 间 。 

有 研究 表明 ,软件 开发 时 间 的 80% 以 上 用 于 下 面 几 个 方面 : 

。 调试 自己 的 代码 (单元 测试 ) 。 

。 调试 自己 和 其 他 相关 的 代码 (模块 间接 口 测试 ) 。 

。 调试 整个 系统 (系统 测试 ) 和 进行 系统 的 软件 、 硬 件 的 系统 集成 测试 。 

尤其 是 嵌入 式 系统 中 的 软件 、 硬 件 的 系统 集成 可 能 需要 花费 10 一 200 倍 的 时 间 来 找 一 个 
bug; 而 这 个 bug 在 开始 的 时 候 可 能 很 容易 就 能 找到 。 一 个 小 bug 可 能 让 我 们 付出 巨大 的 代 
价 , 即 使 这 个 bug 对 整个 系统 的 性 能 没有 太 大 的 影响 ,但 很 可 能 会 影响 整个 系统 的 运行 。 


9.4.3 ” 肉 入 式 测试 环境 的 创建 与 实施 


嵌入 式 系统 在 开发 过 程 的 不 同 阶段 涉及 大 量 的 测试 活动 ,每 个 测试 活动 都 需要 有 特定 的 
测试 环境 。 这 里 讨论 这 些 测试 活动 分 别 需 要 什么 样 的 测试 环境 ,要 达到 什么 测试 目标 。 在 开 
始 开发 戏 人 式 系统 到 产品 发 布 之 间 , 通 常 将 开发 划分 为 下 面 几 个 阶段 : 

。 模拟 阶段 。 

。 原型 阶段 。 

。 临近 生产 阶段 。 

。 开发 后 阶段 。 

对 于 复杂 的 系统 ,这 些 阶段 还 可 以 由 更 多 的 子 阶段 组 成 ; 对 于 不 太 复 杂 的 系统 ,可 以 省 略 
其 中 的 一 个 或 多 个 阶段 。 在 开发 阶段 ,要 对 产品 进行 测试 和 提高 质量 ,直到 确认 已 经 达到 质量 
要 求 才 可 以 投入 生产 。 在 开发 阶段 之 后 ,有 一 个 最 终 阶段 ,对 制造 过 程 进 行 测 试 和 监督 , 即 开 
发 后 阶段 。 

本 节 的 内 容 适 用 于 分 阶段 来 开发 的 能 入 式 系统 项 目 : 首先 是 被 模拟 的 部 分 (模拟 阶段 )， 
然后 用 真实 部 件 一 个 一 个 来 蔡 代 模拟 部 件 ( 原 型 阶段 ) ,直到 最 终 真正 的 系统 在 真实 的 环境 下 
工作 (临近 生产 阶段 ) 。 

1. 模拟 阶段 

基于 模型 的 开发 中 ,在 需求 确认 和 概念 设计 之 后 ,开始 创建 一 个 仿真 模型 。 嵌 入 式 系统 的 
开发 人 员 使 用 这 个 可 执行 的 仿真 模型 来 支持 初始 设计 、 验 证 概念 并 开发 和 校 验 下 一 个 开发 步 
又 的 详细 需求 。 这 一 开发 阶段 也 被 称 为 "模型 测试 和”* 模 型 循环 "。 在 这 一 阶段 的 测试 目标 是 
验证 概念 ,优化 设计 。 

执行 一 个 仿真 模型 并 测试 其 行为 ,需要 有 一 个 特定 的 测试 环境 或 测试 床 。 需 要 有 专用 的 
软件 工具 来 建造 和 和 运行 仿真 模型 ,生成 模型 中 的 信号 并 分 析 响应 。 

在 模拟 阶段 的 测试 一 般 由 以 下 3 个 步骤 组 成 : 

(1) 单 向 模拟 。 髋 入 式 系统 的 模型 被 分 割 开 进行 测试 。 一 次 将 一 个 输入 信号 注入 模拟 的 
艇 入 式 系统 并 分 析 最 终 输 出 。 与 环境 的 动态 交互 被 忽略 。 

(2) 反馈 模拟 。 测 试 模拟 的 嵌入 式 系统 与 环境 之 间 的 交互 。 环 境 模型 为 蔡 入 式 系统 生成 
输入 ,模拟 的 嵌入 式 系统 的 最 终 输 出 被 反馈 回环 境 模型 ,从 而 为 散人 式 系统 形成 新 的 输入 。 

(3) 快速 原型 法 。 与 真实 环境 相连 来 测试 仿真 的 嵌入 式 系统 , 它 是 评估 仿真 模型 正确 性 
的 根本 方法 。 

“反馈 模拟 ”需要 首先 开发 环境 的 有 效 模型 ,该 模型 与 所 预期 的 环境 模型 的 动态 行为 尽 
可 能 接近 。 通 过 与 环境 的 实际 行为 相 比 较 来 校 验 该 模型 。 常 常 是 首先 开发 一 个 详细 模型 ， 
接 下 来 进行 简化 ,详细 模型 与 简化 模型 都 需要 得 到 校 验 。 可 以 通过 “ 单 向 模拟 ”来 校 验 环境 
模型 。 

在 基于 模型 的 开发 中 ,一 个 有 效 的 工程 实践 是 在 开发 嵌入 式 系统 模型 之 前 开发 环境 的 模 
型 ,然后 用 环境 的 (简化 ) 模 型 来 导出 在 蔡 入 式 系统 中 必须 实行 的 控制 规则 。 接 下 来 用 单 向 模 
拟 、 反 馈 模拟 和 快速 原型 法 来 验证 控制 规则 。 

(1) 单 向 模拟 。 和 嵌入 式 系统 用 一 个 可 执行 的 模型 来 模拟 ,生成 输入 信号 , 注 人 到 艇 人 式 系 
统 的 模型 中 ,模型 的 输出 信号 被 监控 .记录 并 加 以 分 析 。 这 种 “模拟 ”是 单 向 的 ,因为 在 模型 中 
不 包含 “环境 ”的 动态 行为 。 


需要 有 工具 来 为 嵌入 式 系统 的 模拟 生成 信号 ,同时 记录 模型 的 输出 信号 。 可 以 手工 来 比 
较 记 录 信 和 号 与 预期 结果 ,但 也 可 以 通过 工具 来 完成 。 信 号 生成 工具 甚至 可 以 基于 实际 结果 生 
成 新 的 输入 信号 ,以 减少 设计 中 的 可 能 缺陷 。 

根据 模拟 环境 的 不 同 ,可 以 采用 不 同 的 方法 来 为 模型 生成 输入 信号 并 记录 模型 的 输出 信 
号 。 在 计算 机 平台 上 模拟 能 和 人 式 系统 。 可 以 依靠 在 模拟 平台 外 围 总 线 上 的 硬件 来 为 系统 注 人 
输入 信号 并 记录 输出 信号 。 可 以 通过 计算 机 平台 的 操作 终端 来 手工 控制 并 读 出 模型 中 的 
变量 。 

模拟 CASE(Computer-Aided Software Engineering) 环 境 中 的 做 入 式 系统 ,生成 输入 信和 号 
的 激励 并 捕获 该 环境 中 的 输出 响应 。 通 过 类 似 UML 等 建 模 语言 来 创建 可 执行 的 模型 。 根 据 
对 应 的 用 例 和 顺序 图 ,可 以 自动 地 生成 测试 用 例 。 

单 路 模拟 也 被 用 于 环境 模型 的 模拟 。 此 时 ,模型 中 不 包含 (有 规则 控制 的 ) 谋 入 式 系统 的 
动态 行为 。 

(2) 反馈 模拟 。 在 一 个 可 执行 的 动态 模型 中 ,内 人 式 系统 及 其 周围 环境 被 模拟 。 如 果 能 
够 对 嵌入 式 系统 及 其 环境 的 仿真 模型 的 复杂 度 加 以 约束 ,而 且 不 会 降低 模型 的 逼真 度 ,那么 这 
一 选项 就 是 可 行 的 。 例 如 ,如 果 设 计 的 苦 入 式 系统 将 运用 于 汽车 的 导航 控制 ,系统 环境 就 是 汽 
车 本 身 , 加 上 道路 ` 风 、 外 部 温度 ,驾驶 员 等 。 从 可 行 性 和 有 用 性 的 观点 来 看 ,可 以 确定 该 模型 
只 限于 导航 控制 . 节 流 阀 位 置 和 汽车 速度 。 

在 对 能 人 式 系统 本 身 或 “环境 ” 单 向 模拟 后 ,反馈 模拟 可 能 是 复杂 设计 过 程 中 的 下 一 步 。 
可 以 通过 执行 测试 用 例 来 确认 设计 ,用 例 可 能 偏离 了 模型 特征 并 且 更 改 了 模型 运行 的 状态 。 
记录 和 监控 模型 的 响应 ,随后 进行 分 析 。 

模型 的 测试 床 需 要 能 够 更 改 嵌 入 式 系统 模型 或 环境 模型 的 特征 ,而 且 也 必须 能 够 读 取 并 
捕获 其 他 特征 ,从 而 导出 模型 的 行为 。 再 者 ,就 像 单 向 模拟 中 一 样 ,测试 床 也 可 以 被 安排 在 一 
个 专用 的 计算 机 平台 以 及 CASE 环境 中 。 在 这 一 阶段 ,使 用 的 工具 有 : 

。 信号 生成 设备 和 信号 监控 设备 。 

。 模拟 计算 机 。 

。 CASE 工具 。 

(3) 快速 原型 法 。 一 个 可 选 的 步骤 是 通过 采用 实际 或 足以 等 价 的 环境 来 代替 对 环境 的 详 
细 模 拟 , 从 而 可 以 对 控制 规则 有 更 多 的 确认 。 例 如 ,在 一 台 模拟 计算 机 上 和 运行 对 导航 控制 规则 
的 模拟 ,可 以 通过 将 计算 机 放 在 汽车 的 乘客 座位 上 ,而 且 与 汽车 的 机 械 和 电子 器 件 附 近 的 传 感 
器 和 制动器 相连 来 得 到 校 验 。 这 里 一 般 使 用 高 性 能 的 计算 机 ,而 忽略 系统 的 资源 约束 。 例 如 ， 
快速 原型 法 软件 可 以 是 32 位 浮 点 数 处 理 , 而 最 终 产品 被 限制 为 8 位 整数 处 理 。 

2. 原型 阶段 

此 时 不 是 利用 模型 来 开发 嵌入 式 系统 。 上 面 的 第 一 阶段 描述 的 是 基于 模型 的 开发 ,在 达 
到 模拟 阶段 的 目标 以 后 ,进入 原型 阶段 。 这 一 阶段 的 目标 是 : 

。 证 明 (来 自前 一 阶段 ) 仿 真 模型 的 有 效 性 。 

。 确认 系统 满足 需求 。 

。 临近 生产 的 单元 发 布 。 

在 原型 阶段 ,模拟 部 件 将 逐渐 被 实际 的 系统 硬件 .计算 机 硬件 .应 用 软件 蔡 代 。 这 时 ,在 模 
拟 模 型 与 硬件 之 间 需 要 有 接口 。 一 般 情 况 下 可 以 使 用 一 个 仿真 器 。 在 模拟 模型 中 可 容易 得 到 
信号 ,而 实际 硬件 可 能 不 会 很 容易 地 得 到 。 因 而 ,必须 安装 专门 的 信号 传感器 与 转换 器 ,以 及 


信号 记录 与 分 析 设 备 。 可 能 有 必要 校准 传感器 、 转 换 器 与 记录 设备 ,并 且 保 存 校准 日 志 来 修正 
所 记录 数据 。 开 发 一 个 或 多 个 原型 通常 是 一 个 需要 多 次 迭代 的 过 程 。 软 件 和 硬件 是 并 行 开发 
的 ,常常 要 集成 到 一 起 来 检验 是 否 仍然 可 以 工作 。 每 一 次 的 原型 开发 都 意味 着 与 最 终 产 品 的 
差距 越 来 越 小 。 随 着 每 一 步 又 的 进行 ,在 前 期 阶段 得 出 的 有 效 性 结论 的 不 确定 性 也 进一步 
减 小 。 

为 了 阐明 这 一 模拟 部 件 逐 渐 为 真实 部 件 所 代 蔡 的 过 程 ,在 嵌入 式 系统 的 一 般 结 构 中 标 
识 出 4 个 主要 的 区 域 。 它 们 在 布局 中 可 以 分 别 从 属于 原型 阶段 的 模拟 仿真 试验 和 初步 
版 本 。 

用 在 入 式 软 件 来 实现 系统 行为 。 可 以 通过 下 面 方式 来 模拟 : 

。 在 主机 上 和 运行 面向 该 主机 编译 的 其 入 式 软件 。 

。 在 目标 处 理 器 的 仿真 器 上 运行 嵌入 式 软件 ,该 目标 处 理 器 运行 在 主机 上 。 舱 入 式 软件 

的 运行 可 以 被 认为 是 “真实 的 ”, 因 为 该 处 理 器 是 面向 目标 处 理 器 而 编译 的 。 

在 早期 开发 阶段 ,在 开发 环境 中 可 以 使 用 高 性 能 的 处 理 器 。 可 以 在 开发 环境 中 使 用 最 终 
处 理 器 的 仿真 器 来 测试 实际 软件 ,实际 软件 是 面向 目标 处 理 器 而 编译 的 。 

其 他 的 嵌入 式 系统 。 可 以 通过 下 面 方式 来 模拟 : 

。 在 主 计算 机 的 测试 床 中 模拟 系统 。 

。 构造 一 个 试验 硬件 配置 。 

。 构造 一 个 初步 的 (原型 )PCB(Printing Circuit Board) 及 其 所 有 的 部 件 。 

嵌入 式 系 统 的 环境 可 以 通过 信号 生成 方法 来 静态 地 模拟 或 通过 模拟 计算 机 来 动态 地 
模拟 。 

在 原型 阶段 ,可 以 应 用 下 列 测试 层次 ,每 一 个 测试 层次 都 需要 有 专门 的 测试 环境 : 

(1) 软件 单元 测试 与 软件 集成 测试 。 

对 于 软件 单元 测试 和 软件 集成 测试 ,创建 一 个 可 以 与 仿真 模型 测试 环境 相 比 较 的 测试 床 。 
两 者 的 区 别 在 于 执行 的 对 象 。 在 原型 阶段 ,测试 对 象 是 一 个 软件 单元 或 一 组 集成 软件 单元 的 
可 执行 版 本 , 它 是 在 设计 基础 上 开发 的 ,或 是 从 模拟 模型 生成 的 。 

第 一 步 是 编译 软件 以 便 在 主机 上 执行 。 这 个 环境 (主机 ) 对 资源 ,性 能 或 功能 强大 的 商品 
工具 没有 限制 。 这 使 得 开发 和 测试 要 比 在 目标 环境 中 容易 很 多 。 这 种 测试 也 被 称 为 主机 / 目 
标 机 测试 。 对 这 些 在 “主机 上 编译 ”的 软件 单元 和 集成 软件 单元 的 测试 目标 是 根据 技术 设计 来 
校 验 它们 的 行为 ,以 及 确认 在 前 一 阶段 使 用 的 仿真 模型 的 有 效 性 。 

在 单元 测试 和 集成 测试 中 的 第 二 步 是 编译 软件 ,以 便 在 嵌入 式 系统 的 目标 处 理 器 上 运行 。 
软件 在 目标 硬件 上 实际 运行 之 前 ,编译 版 本 可 以 在 目标 处 理 器 的 一 个 模拟 器 上 运行 。 该 模拟 
器 可 以 运行 在 开发 系统 计算 机 或 另 一 个 计算 机 上 。 这 些 测试 的 目标 是 确认 软件 将 能 够 在 目标 
处 理 器 上 正确 地 运行 。 

在 上 面 提 到 的 两 种 情况 下 ,测试 床 必须 提供 测试 对 象 的 输入 激励 ,并 提供 其 他 的 特性 
来 监控 测试 对 象 的 行为 ,同时 记录 信和 号。 通常 方式 是 提供 进入 断 点 ,存储 、 读 取 和 操作 变 
量 。 提 供 这 些 特性 的 工具 可 以 是 CASE 环境 的 一 部 分 ,也 可 以 由 开发 嵌入 式 系统 的 组 织 来 
专门 开发 。 

(2) 硬件 /软件 集成 测试 。 

在 硬件 /软件 集成 测试 中 ,测试 对 象 是 要 加 载 集成 软件 的 硬件 部 分 。 软 件 被 加 载 到 硬件 的 
存储 器 当中 ,通常 是 指 EPROM(E)。 这 部 分 硬件 可 能 有 一 个 实验 配置 ,例如 是 一 个 硬 布线 电 


路 板 , 该 电路 板 包含 几 个 部 件 ,存储 器 是 其 中 的 一 部 分 。 术 语 * 实 验 的 表示 所 使 用 的 硬件 将 不 
会 再 进一步 开发 (与 一 个 原型 相对 比 ,原型 通常 还 要 继续 被 开发 ,而 实验 硬件 是 一 个 要 被 “丢弃 
的 原型 ")。 硬 件 / 软 件 集成 测试 的 目标 是 校 验 嵌入 式 软 件 在 目标 处 理 器 上 能 否 正 确 地 与 周转 
的 硬件 协同 运行 。 由 于 硬件 行为 是 该 测试 的 一 个 基本 部 分 ,因而 通常 也 被 称 为 “硬件 循环 ”。 

用 于 硬件 /软件 集成 测试 的 测试 环境 必须 与 硬件 有 接口 。 依 赖 于 测试 对 象 及 其 完备 程度 ， 
存在 下 列 可 能 性 : 

。 用 信号 生成 器 提供 激励 输入 。 

。 用 示波器 或 逻辑 分 析 仪 ,以 及 数据 存储 设备 一 起 来 监控 输出 。 

。 用 电路 内 嵌 的 测试 设备 来 监控 非 输 出 的 其 他 点 的 系统 行为 。 

。 在 实时 模拟 器 中 模拟 测试 对 象 的 环境 。 

(3) 系统 集成 测试 。 

在 系统 集成 测试 中 ,嵌入 式 系统 包含 的 所 有 硬件 部 分 被 整合 起 来 ,一 般 是 在 一 个 原型 
PCB 上 。 很 明显 ,这 要 求 前 面 所 有 的 测试 : 单元 测试 .软件 集成 测试 硬件 /软件 集成 测试 都 必 
须 成 功 执行 。 系 统 的 所 有 软件 部 分 都 必须 被 加 载 。 系 统 集成 测试 的 目标 是 校 验 整 个 能 入 式 系 
统 能 否 正确 运行 。 

系统 集成 测试 的 测试 环境 与 硬件 /软件 集成 测试 的 环境 很 类 似 。 毕 况 , 整 个 嵌入 式 系统 也 
是 包含 软件 和 硬件 部 分 。 两 者 的 差异 实际 上 在 于 整个 系统 的 原型 PCB 提供 最 终 的 1/O 和 电 
源 连接 器 。 可 以 通过 这 些 连 接 器 来 提供 激励 输入 和 监控 输出 信号 ,以 及 与 动态 模拟 结合 。 
PCB 预先 定义 的 位 置 可 以 监控 连接 器 的 信号 并 执行 电路 内 散 的 测试 。 

(4) 环境 测试 。 

在 这 一 阶段 ,环境 测试 的 目标 是 检验 和 校正 前 面 一 些 阶段 中 环境 中 可 能 出 现 的 问题 。 这 
可 以 与 临近 生产 阶段 的 环境 测试 相对 比 ,论证 环境 的 符合 度 。 环 境 测试 更 适合 在 已 经 有 足够 
成 熟 度 的 原型 上 进行 。 这 些 原型 建立 在 PCB 上 ,按照 正确 的 规范 与 硬件 相连 。 如 果 要 求 在 向 
人 式 系统 中 有 防 电磁 干扰 (EMT) 措 施 ,那么 也 必须 在 测试 的 原型 上 有 防 EMI 措施 。 

环境 测试 要 求 有 特殊 的 测试 环境 。 在 大 多 数 环境 下 ,测试 环境 可 以 通过 购买 或 利用 购买 
的 部 件 组 装 来 满足 需求 。 如 果 某 些 特定 类 型 的 环境 测试 只 是 偶尔 执行 ,那么 建议 租用 必要 的 
设备 或 将 测试 承包 给 专业 公司 。 

在 环境 测试 期 间 ,可 能 需要 测试 运行 中 的 嵌入 式 系统 。 这 时 ,就 必须 像 前 面 两 个 测试 层次 
一 样 来 创建 模拟 的 “环境 ”。 

环境 测试 涉及 以 下 两 个 方面 : 

。 测试 嵌入 式 系统 对 环境 影响 的 程度 .例如 系统 的 电磁 兼容 性 。 因 而 ,这 些 测试 所 需 的 

工具 是 测量 设备 。 

。 测试 嵌入 式 系统 对 周围 条 件 的 敏感 性 ,例如 温度 和 湿度 测试 .电磁 干扰 的 冲击 测试 和 

振动 测试 等 。 所 需 的 测试 设施 就 是 将 这 些 条 件 施加 在 系统 上 的 设备 ,诸如 空调 室 、 冲 
击 仪表 以 及 为 EMCVEMI 测试 所 装备 的 区 域 。 同 样 ,这 里 也 需要 有 测量 设备 。 

3. 临近 生产 阶段 

临近 生产 阶段 需要 建造 一 个 生产 前 的 单元 , 它 用 于 最 后 一 次 校 验 是 否 所 有 的 需求 ,包括 环 
境 需 求 都 已 经 得 到 满足 ,以 及 用 于 发 布 最 终 设计 并 投入 生产 。 

这 一 阶段 的 测试 目标 是 : 

。 最 后 一 次 校 验 所 有 的 需求 是 否 得 到 满足 。 


论证 是 否 符合 环境 标准 、 行 业 标准 ISO 标准 、 军 方 标准 及 政府 标准 。 临 近 生产 单元 是 
代表 最 终 产品 的 第 一 个 单元 。 在 早期 的 原型 上 可 能 已 经 执行 了 初步 测试 并 修正 了 一 
些 缺 陷 , 但 这 些 测试 的 结果 可 能 仍然 不 能 被 接受 为 最 终 认可 。 
论证 可 否 在 预定 时 间 、 预 定 需 求 之 内 的 生产 环境 下 建造 出 系统 。 
论证 系统 可 否 在 实际 运行 环境 中 得 到 维护 ,满足 MTTR(Mean Time to Repair) 要 求 。 

。 向 (潜在 的 ) 客 户 演 示 产 品 。 

临近 生产 单元 是 一 个 在 实际 运行 环境 中 被 测试 的 实际 系统 , 它 是 前 面 所 有 阶段 工作 的 终 
点 。 临 近 生产 单元 等 于 或 至 少 是 代表 最 终生 产 单元 。 与 生产 单元 的 区 别 在 于 可 能 对 临近 生产 
单元 仍然 有 测试 规定 , 像 信号 拦截 等 。 然 而 ,这 些 是 生产 质量 规定 ,而 不 是 试验 质量 规定 。 也 
可 能 需要 有 不 止 一 个 样品 ,因为 测试 可 能 并 行 开展 或 者 在 测试 中 单元 被 毁坏 。 有 时 候 , 临 近 生 
产 单元 也 被 称 为 “红色 标签 单元 ”, 而 实际 生产 单元 被 称 为 “黑色 标签 单元 ”。 

依据 一 个 或 多 个 预先 确定 的 测试 方案 ,对 临近 生产 单元 进行 实际 情况 测试 。 在 导航 控制 
的 例子 中 ,实际 测试 可 能 由 多 个 测试 组 成 ,测试 是 由 安装 在 一 个 原型 汽车 上 的 导航 控制 临近 生 
产 单元 驱动 。 对 其 他 临近 生产 单元 可 能 需要 进行 环境 限制 测试 。 在 前 面 一 些 阶 段 中 ,可 能 已 
经 从 模拟 模型 中 生成 了 测试 输入 信号 ,而 且 可 能 对 输出 数据 进行 在 线 监控 ,或 存储 在 硬盘 中 以 
便 日 后 进行 分 析 。 在 临近 生产 阶段 ,需要 有 检测 仪器 .数据 显示 与 数据 记录 设备 ,可 能 还 需要 
遥感 勘测 ,例如 ,如 果 测 试 涉及 到 用 仪表 设备 或 人 能 观察 到 有 限 空间 的 运载 工具 ,诸如 导弹 、 飞 
行 器 、 赛 车 和 其 他 运载 工具 。 也 应 当 关注 测试 仪器 .遥感 勘测 数据 显示 设备 与 记录 的 质量 与 
校准 。 如 果 在 测试 中 收集 到 的 数据 不 可 信 ,那么 测试 就 毫 无 价值 。 

在 这 一 阶段 ,可 应 用 的 测试 类 型 有 : 

。 系统 验收 测试 ; 

。 质量 鉴定 测试 

。 安全 执行 测试 ; 

。 生产 和 维护 测试 设备 的 测试 ; 

。 由 相关 政府 机 构 进行 的 检查 或 测试 。 

可 应 用 的 测试 方法 有 : 

。 实际 情况 测试 ; 

。 随机 测试 ; 

。 故障 引入 。 

在 这 一 阶段 ,使 用 的 典型 工具 有 : 

。 环境 测试 设备 ,如 空调 室 .振动 表 等 ; 

。 数据 采集 和 记录 设备 ; 

。 和 遥感 勘测 ; 

。 数据 分 析 工 具 ; 

。 故障 引入 工具 。 

4. 开发 后 阶段 

原型 与 临近 生产 阶段 最 终 使 系统 可 以 发 布 并 投入 生产 。 这 就 意味 着 被 测 系统 有 着 合格 的 

质量 ,可 以 销售 给 客户 。 但 是 ,组 织 如 何 能 够 确保 所 有 生产 的 产品 都 有 同样 的 质量 等 级 呢 ? 换 

名 话说 ,即使 发 布 成 功能 投入 生产 ,但 如 果 生 产 过 程 的 质量 不 合格 ,那么 生产 的 产品 质量 将 不 
合格 。 因 此 ,在 大 规模 生产 之 前 ,组 织 可 能 需要 采取 更 多 的 措施 ,使 得 生产 过 程 是 可 控 的 ,并 保 


证 所 制造 产品 的 质量 。 

应 当 考虑 采取 下 面 的 措施 : 

(1) 生产 设备 的 开发 和 测试 。 在 嵌入 式 系统 的 开发 中 ,对 已 发 布 系统 的 生产 设备 进行 开 
发 和 测试 可 能 同样 很 重要 。 生 产 线 的 质量 对 嵌入 式 系统 质量 有 着 较 大 的 影响 ,因而 很 重要 的 
是 要 承认 这 一 措施 的 必要 性 。 生 产 线 的 开发 和 随后 的 测试 被 定义 为 开发 后 活动 ,但 也 可 以 在 
嵌入 式 系统 开发 期 间 的 任何 时 间 进 行 , 不 过 不 能 在 建 模 阶段 进行 ,因为 这 时 还 缺乏 系统 的 最 终 
特性 。 男 一 方面 ,生产 线 必须 在 实际 的 生产 开始 之 前 可 用 .。 

(2) 首 件 产品 检查 。 有 了 时候, 需要 对 第 一 套 生 产 单元 进行 首 件 产品 检查 。 依 据 最 终 规范 、 
变更 请 求 ,生产 图 纸 、 质 量 标准 来 检查 单元 ,以 确保 生产 单元 符合 所 有 的 规范 和 标准 。 如 果 最 
终 产品 的 质量 不 过 关 , 那 么 所 有 的 开发 和 测试 工作 都 将 失去 意义 。 

(3) 生产 和 维护 测试 。 出 于 质量 控制 目的 ,可 能 需要 对 生产 单元 执行 测试 。 这 可 能 是 对 
每 一 个 单元 进行 测试 ,或 是 对 生产 样品 进行 更 为 详细 的 测试 。 可 能 需要 在 现场 有 内 置 的 测试 
设备 来 发 现 并 修理 故障 以 及 维护 。 用 于 生产 和 维护 测试 的 设备 必须 是 在 单元 (测试 设计 ) 阶 段 
就 设计 出 来 ,而 且 在 开发 过 程 中 得 到 测试 。 此 外 ,开发 测试 和 开发 测试 结果 可 以 被 用 做 生产 和 
维护 测试 的 基础 。 


9.4.4 肉 入 式 测试 的 工具 


本 节 介 绍 一 些 嵌 入 式 系统 常用 的 测试 工具 。 

1. 源码 级 调试 器 (Source-level Debugger) 

这 种 调试 器 一 般 提供 单 步 或 多 步调 试 . 断 点 设置 .内 存 检测 .变量 查看 等 功能 ,是 嵌入 式 调 
试 最 根本 有 效 的 调试 方法 。 比 如 VxWorks Tornadoll 提供 的 gdb 就 属于 这 一 种 工具 。 

2. 简单 实用 的 打印 显示 工具 (printf) 

printf 或 其 他 类 似 的 打印 显示 工具 估计 是 最 灵活 、 最 简单 的 调试 工具 。 打 印 代 码 执行 过 
程 中 的 各 种 变量 可 以 让 我 们 知道 代码 执行 的 情况 。 但 是 ,printf 对 正常 的 代码 执行 干扰 比较 
大 (一 般 printf 占用 CPU 比较 长 的 时 间 ) ,需要 慎重 使 用 ,最 好 设置 打印 开关 来 控制 打印 。 

3. ICE 或 JTAG 调试 器 (In-circuit Emulator) 

ICE 是 用 来 仿真 CPU 核心 的 设备 , 它 可 以 在 不 干扰 运算 器 的 正常 运行 情况 下 ,实时 地 检 
测 CPU 的 内 部 工作 情况 。 像 桌面 调试 软件 所 提供 的 复杂 的 条 件 断 点 .先进 的 实时 跟踪 .性 能 
分 析 和 端口 分 析 这 些 功能 , 它 也 都 能 提供 。ICE 一 般 都 有 一 个 比较 特殊 的 CPU, 称 为 外 合 
(bond-out)CPU。 这 是 一 种 被 打开 了 封装 的 CPU ,并 且 通 过 特殊 的 连接 ,可 以 访问 到 CPU 的 
内 部 信号 ,而 这 些 信号 在 CPU 被 封装 时 是 没 法 “看 到 ”的 。 当 和 工作 站 上 强大 的 调试 软件 联 
合 使 用 时 ,ICE 就 能 提供 所 能 找到 的 最 全 面 的 调试 功能 。 但 ICE 同样 有 一 些 缺 来 点 : 昂贵 .不 
能 全 速 工 作 。 同 样 ,并 不 是 所 有 的 CPU 都 可 以 作为 外 合 CPU 的 ,从 另 一 个 角度 来 说 ,这 些 外 
合 CPU 也 不 大 可 能 及 时 地 被 新 出 的 CPU 所 更 换 。JTAG(Joint Test Action Group) 最 初 开 
发 出 来 虽然 是 为 了 监测 IC 和 电路 连接 ,但 是 这 种 串 行 接口 扩展 了 用 途 , 包 括 对 调试 的 支持 。 
AD 公司 为 Blackfin 设计 的 Visual Dsp 十 十 就 支持 高 速 的 JTAG 调试 。 

4. ROM 监视 器 (ROM Monitor) 

ROM 监控 器 是 一 小 程序 , 驻 留 在 嵌入 系统 ROM 中 ,通过 串 行 的 或 网 络 的 连接 和 运行 在 
工作 站 上 的 调试 软件 通信 。 这 是 一 种 便宜 的 方式 .当然 也 是 最 低 端 的 技术 。 它 除了 要 求 一 个 
通信 端口 和 少量 的 内 存 空间 外 ,不 需要 其 他 任何 专门 的 硬件 。 并 提供 了 如 下 功能 : 下 载 代码 、 


运行 控制 、 断 点 、 单 步 步 进 ,以 及 观察 ,修改 寄存 器 和 内 存 。 因 为 ROM 监控 器 是 操作 软件 的 一 
部 分 ,只 有 当 应 用 程序 运行 时 它 才 会 工作 。 如 果 想 检查 CPU 和 应 用 程序 的 状态 ,就 必须 停 下 
应 用 程序 ,再 次 进入 ROM 监控 器 。 

5. Data 监视 器 (Data Monitor) 

这 种 监视 器 在 不 停止 CPU 运行 的 情况 下 不 仅 可 以 显示 指定 变量 内 容 , 还 可 以 收集 并 以 
图 形 形 式 显示 各 个 变量 的 变化 过 程 。 

6. OS 监视 器 (Operating System Monitor) 

操作 系统 监视 器 可 以 显示 诸如 任务 切换 、 信 号 量 收发 .中 断 等 事件 。 一 方面 ,这 些 监视 器 
能 够 呈现 事件 之 间 的 关系 和 时 间 联 系 ; 另 一 方面 ,还 可 以 提供 对 信号 量 优先 级 反 转 、 死 锁 和 中 
断 延 时 等 问题 的 诊断 。 

7. 性 能 分 析 工 具 (Profiler) 

可 以 用 来 测试 CPU 到 底 耗 在 哪里 。profiler 工具 可 以 检测 出 系统 的 瓶颈 在 哪里 .CPU 的 
使 用 率 以 及 需要 优化 的 地 方 。 

8. 内 存 测试 工具 (Memory Tester) 

可 以 找到 内 存 使 用 的 问题 所 在 ,比如 内 存 泄 露 内存 碎片 .内 存 崩 溃 等 问题 。 如 果 发 现 系 
统 出 现 一 些 不 可 预知 的 或 间歇 性 的 问题 ,就 应 该 使 用 内 存 测试 工具 来 测试 。 

9. 运行 跟踪 器 (Execution Tracer) 

可 以 显示 CPU 执行 了 哪些 函数 、 谁 在 调用 、 参 数 是 什么 、 何 时 调用 等 情况 。 这 种 工具 主 
要 用 于 测试 代码 迎 辑 ,可 以 在 大 量 的 事件 中 发 现 异 常 。 

10. 覆盖 工具 (Coverage Tester) 

主要 显示 CPU 具体 执行 了 哪些 代码 ,并 检测 出 哪些 代码 分 支 没有 被 执行 到 。 这 样 有 助 
于 提高 代码 质量 并 消除 无 用 代码 。 

11. GUI 测试 工具 (GUI Tester) 

很 多 典 入 式 应 用 带 有 某 种 形式 的 图 形 用户 界 面 进行 交互 ,有 些 系统 性 能 测试 是 根据 用 户 
输入 响应 时 间 进 行 的 。GUI 测试 工具 可 以 作为 脚本 工具 有 开发 环境 中 运行 测试 用 例 ,其 功能 
包括 对 操作 的 记录 和 回放 、 抓 取 屏 幕 显示 供 以 后 分 析 和 比较 .设置 和 管理 测试 过 程 (Rational 
公司 的 robot 和 Mercury 的 Loadrunner 工具 是 杰出 的 代表 )。 很 多 藤 入 式 设 备 没 有 GUI, 但 
常常 可 以 对 戏 和 人 式 设备 进行 插 装 来 运行 GUI 测试 脚本 。 虽 然 这 种 方式 可 能 要 求 对 被 测 代 码 
进行 更 改 , 但 是 节省 了 功能 测试 和 回归 测试 的 时 间 。 

12. 自制 工具 (Home-made tester) 

在 嵌入 式 应 用 中 ,有 时 候 为 了 特定 的 目的 ,需要 自行 编写 一 些 工 具 来 达到 某 种 测试 目的 。 
如 视频 流 显示 工具 在 测试 视频 会 议 数据 流向 和 变化 上 很 有 用 ,有 时 能 帮助 找到 隐藏 很 深 
的 bug。 


9.4.5 艇 入 式 测试 应 用 一 一 手机 测试 


1. 手机 测试 简介 

手机 测试 是 嵌入 式 测 试 的 一 种 ,涉及 硬件 测试 和 软件 测试 ,还 有 结构 的 测试 ,比如 抗 压 、 抗 
摔 、 抗 疲劳 , 抗 低温 高 温 等 ,如 手机 的 结构 设计 不 合理 会 造成 应 力 集中 ,使 得 本 身 外 过 变形 及 诸 
如 翻盖 手机 的 盖子 失效 及 其 他 相关 问题 。 硬 件 测试 一 般 都 有 严格 的 物理 电气 指标 ,需要 专门 
的 仪器 ,需要 了 解 手 机 的 硬件 特性 ,比如 CPU、 存储 器 等 。 骨 入 在 手机 中 的 软件 出 现 故 障 不 一 


定 是 由 于 软件 的 缺陷 引起 的 ,可 能 是 硬件 和 软件 没 能 很 好 地 配合 , 即 硬件 和 软件 的 集成 有 
问题 。 

嵌入 式 系统 的 编程 一 般 用 C 语言 ,也 有 其 他 语言 ,比如 C++。 在 最 早 的 时 候 是 用 汇编 语 
言 ,但 是 由 于 汇编 难 懂 , 而 且 也 不 容易 移植 ,渐渐 的 被 高 级 语言 代替 。 尽 管 如 此 ,在 启动 程序 
时 ,也 就 是 启动 手机 电路 板 的 时 候 , 还 是 需要 用 一 些 汇编 语言 来 完成 。 骨 入 式 系统 的 程序 和 
PC 上 运行 着 的 程序 没有 任何 本 质 不 同 ,唯一 不 同 是 在 PC 上 运行 的 程序 可 以 方便 地 看 到 运行 
结果 ,而 在 嵌入 式 系统 中 不 易 看 到 结果 。 除 非 使 用 LCD 硬件 ,编写 了 LCD 驱动 程序 ,然后 再 
编写 显示 程序 。 

很 多 手机 的 问题 都 和 存储 有 关 , 计 算 机 的 存储 是 关键 ,手机 也 一 样 ,但 是 计算 机 有 硬盘 作 
为 存储 ,而 绝 大 多 数 手机 的 数据 都 存储 在 存储 器 里 。 存 储 器 分 为 几 类 ,如 RAM( 随 机 存储 
器 ) .ROM( 随 机 只 读 存储 器 )、 闪 存 以 及 电子 可 编程 存储 和 非 易 失 存储 器 等 。RAM 又 有 
SRAM( 静 态 RAM) 和 DRAM( 动 态 RAM) 之 分 。 

随 着 集成 电路 技术 和 宽带 技术 的 发 展 ,手机 工业 正在 从 以 GSM、CDMA、PCS 和 GPRS 
为 代表 的 2G/2. 5G 向 基于 无 线 网 络 宽带 技术 的 、 融 合 语音 、 数 据 和 视频 图 像 的 3G 转移 。 手 
机 芯片 集成 度 越 来 越 高 ,手机 正在 沿 着 模块 越 来 越 小 、 功 能 越 来 越 多 的 方向 发 展 ,3G 手机 因 其 
功能 繁多 ,对 手机 测试 行业 提出 了 更 高 的 要 求 。 

2. 手机 测试 内 容 

手机 软件 测试 单 从 测试 的 内 容 来 看 ,手机 的 功能 性 测试 是 重点 之 一 ,这 里 仅 就 手机 系统 测 
试 中 的 功能 测试 来 分 析 。 手 机 的 功能 测试 涉及 手机 的 所 有 功能 , 因 手 机 的 类 型 和 型 号 不 同 , 其 
功能 也 不 同 , 通 用 的 功能 有 打 电 话 、 电 话 德 、SIM 卡 存 取 、 铃 声 、. 音 乐 .通话 记录 、 语 音 .闹钟 、 短 
消息 及 转发 .彩信 、 上 网 等 。 功 能 测试 主要 以 黑 盒 为 主 , 采 用 的 是 通用 的 黑 盒 测试 方法 ,达到 覆 
盖 功 能 即 可 。 对 于 一 些 功能 的 测试 需要 提供 必要 的 测试 环境 和 测试 工具 的 支持 ,具体 见 前 面 
章节 内 容 。 这 里 举 三 个 测试 SIM 卡 存储 功能 的 测试 用 例 作为 例子 。 

1) 测试 用 例 1 

编号 : 01。 

测试 项 目 : 测试 存储 在 SIM 卡 上 的 记录 。 

测试 子 项 目 : 在 SIM 卡 上 添加 记录 。 

测试 目的 : 验证 在 SIM 卡 上 添加 记录 的 状态 和 测试 操作 所 有 添加 记录 后 的 状态 。 

测试 前 置 条 件 : 手机 带 SIM 卡 ,处 于 待机 状态 ,充电 器 、 网 络 信号 正常 。 

正确 的 顺序 /步骤 : 

(1) 姓名 输入 。 

@ 是 否 可 以 使 用 任意 输入 法 添加 汉字 、 字 母 ,数字 ,达到 姓名 允许 的 最 大 字 节 ,并 能 正常 
保存 。 

@ 是 否 可 以 使 用 任意 输入 法 添加 汉字 、 字 母 数字 ,在 没有 进行 输入 时 ,是 否 有 警告 提示 
或 是 否 可 以 正常 保存 (根据 产品 要 求 ) 。 

@ 是 否 可 以 使 用 任意 输入 法 添加 汉字 、 字 母 ,数字 ,超过 姓名 允许 的 最 大 字 节 时 ,是 否 有 
警告 提示 ,是否 可 以 正常 保存 。 

四 是 否 可 以 进行 汉字 .字母 .数字 的 混合 输入 ,并 重复 四 一 回 步 , 是 否 有 异常 。 

(2) 电话 号 码 的 输入 。 

QO@ 是 否 可 输入 数字 至 最 大 值 , 并 可 正常 保存 。 


@ 在 不 输入 数字 时 ,进行 保存 时 ,是 否 有 警告 提示 。 

@ 是 否 可 以 输入 汉字 ,字母 ,此 时 是 否 有 警告 提示 或 异常 。 

@ 是 否 可 以 输入 特殊 字符 ,如 十 .P、* 、# ,是 否 可 以 正常 保存 。 比 如 ,连续 输入 多 个 * .P 
或 十 ,不 按 电话 号 码 的 正常 顺序 进行 输入 ,如 “十 十 139 *x*x P123”, 看 看 是 什么 样 的 效果 ,是 否 
显示 正常 。 

(3) 在 输入 过 程 中 按 返 回 键 .挂机 键 . 电 源 键 ,或 翻 合 翻盖 ,是 否 有 警告 提示 或 异常 。 

(4) 待机 界面 下 直接 输入 数字 至 最 大 值 ,是 否 可 以 正常 保存 。 

(5) 待机 界面 下 直接 输入 数字 ,及 特殊 字符 (如 十 ,P) ,是 否 可 以 正常 保存 。 

(6) 将 (1) 一 (5) 步 进行 排列 组 合 , 查 看 是 否 有 异常 情况 。 

预期 结果 及 判定 原则 : 

正常 添加 记录 ,对 异常 情况 进行 分 析 。 

2) 测试 用 例 2 

编号 : 02。 

测试 项 目 : 测试 存储 在 SIM 卡 上 的 记录 。 

测试 子 项 目 : 在 SIM 卡 上 修改 记录 。 

测试 目的 : 验证 在 SIM 卡 上 修改 记录 的 状态 和 测试 操作 所 有 修改 记录 后 的 状态 。 

测试 前 置 条 件 : 手机 带 SIM 卡 ,处 于 待机 状态 ,充电 器 ,网 络 信号 正常 。 

正确 的 顺序 /步骤 : 

(1) 单条 记录 的 修改 。 

@ 是 否 可 以 对 单条 记录 进行 修改 ,包括 姓名 和 数字 。 

@ 连续 将 多 条 记录 的 内 容 ( 姓 名 或 电话 号 码 ) 修 改 成 一 样 。 

@ 手机 或 SIM 卡 的 所 有 记录 全 部 一 样 。 

(2) 连续 多 条 记录 进行 修改 。 

预期 结果 及 判定 原则 : 

(1) 对 多 条 记录 测试 的 目的 是 对 软件 进行 压力 测试 。 

(2) 修改 记录 正常 ,对 异常 情况 进行 分 析 。 

3) 测试 用 例 3 

编号 : 03 。 

测试 项 目 : 测试 存储 在 SIM 卡 上 的 记录 。 

测试 子 项 目 : 在 SIM 卡 上 删除 记录 。 

测试 目的 : 验证 在 SIM 卡 上 删除 记录 的 状态 和 测试 操作 所 有 删除 记录 后 的 状态 。 

测试 前 置 条 件 : 手机 带 SIM 卡 ,处 于 待机 状态 ,充电 器 、 网 络 信号 正常 。 

正确 的 顺序 /步骤 : 

(1) 对 单条 记录 进行 删除 。 

Q@ 删除 后 ,列表 显示 是 否 正常 ,数量 是 否 正确 。 

@ SIM 卡 记录 为 空 时 ,进行 删除 时 ,是 否 有 警告 提示 。 

@ SIM 卡 记录 仅 为 一 条 时 .删除 后 .是 否 有 SIM 卡 内 容 为 空 的 提示 。 

@ 在 删除 过 程 中 ,各 功能 键 是 否 正常 。 

@@ 在 删除 过 程 中 ,进行 中 断 操作 ,比如 按 挂机 键 、 电 源 键 等 ,是 否 正常 。 

(2) 对 多 条 记录 进行 删除 ,目的 是 对 软件 进行 压力 测试 。 


@ 连续 对 SIM 卡 的 多 条 记录 进行 删除 ,是否 出 现 异 常情 况 。 

@ 删除 SIM 卡 记录 直至 为 空 时 ,是 否 有 异常 。 

@ 在 删除 过 程 中 ,各 功能 键 是 否 正常 。 

预期 结果 及 判定 原则 : 

删除 记录 正常 ,对 异常 情况 进行 分 析 。 

除 功能 之 外 ,手机 测试 还 涉及 MMI(Man-Machine Interaction) 测 试 和 底层 手机 栈 协 议 测 
试 。MMI 测试 主要 也 是 通过 测试 功能 来 实现 ,但 其 目的 是 测试 人 与 手机 的 交互 。 由 于 MMI 
的 灵活 性 ,和 各 个 厂家 的 个 性 化 ,以 及 手机 本 身 的 用 户 不 同 , MMI 的 侧重 点 也 就 不 同 , 在 基本 
通话 、 短 消息 ,数据 功能 完成 的 基础 上 可 以 五 花 八 门 ,所 以 测试 的 重点 因 手 机 而 不 同 。 这 里 不 
做 详细 分 析 。 

但 是 ,对 于 手机 栈 协议 的 测试 而 言 ,协议 是 统一 的 ,虽然 实现 方法 可 以 不 同 ,但 是 完成 的 功 
能 必须 相同 ,而 协议 软件 有 一 个 遵守 的 规范 , 即 ETSI (European Telecommunications 
Standards Institute) 指 定 的 协议 规范 ,有 统一 的 命令 规范 和 统一 的 标准 。 消 息 (不 是 软件 编程 
里 所 指 的 消息 ,是 通信 术语 ) 是 固定 的 ,针对 协议 的 测试 ,因为 有 标准 可 循 ,有 规范 可 依 , 一 般 来 
说 ,基于 手机 栈 协 议 的 测试 可 以 采用 白 盒 测试 方法 。 由 于 白 盒 测 试 比较 严 格 ,而 且 耗 费 人 力 ， 
因此 常 采 用 自动 化 测试 工具 ,这 样 节省 人 力 ,缩短 测试 时 间 。 也 可 以 手工 测试 和 自动 化 测试 相 
结合 ,保证 测试 的 可 靠 性 。 测 试 工具 最 好 具有 二 次 开发 功能 ,也 就 是 可 以 自己 编写 脚本 ,针对 
不 同 的 软件 平台 做 一 些 修改 ,这 样 可 以 根据 自己 的 需要 编写 测试 用 例 。 如 果 是 基于 购买 来 的 
协议 进行 测试 ,一 般 需 要 仪器 模拟 一 个 网 络 基 站 来 进行 测试 ,不 过 这 样 的 仪器 比较 昂贵 ,而 且 
测试 人 员 要 对 ETSI 协议 比较 熟悉 。 

开发 通用 、 可 升级 .可 配置 及 兼容 2G/3G 手机 测试 的 无 线 通信 协议 综合 测试 仪 ,使 之 具备 
很 强 的 可 升级 能 力 的 移动 电话 多 协议 测试 集 , 这 样 的 综合 通信 测试 仪器 集成 了 RF (Radio 
Frequency) 发 生 器 .频谱 分 析 仪 和 功率 计 等 传统 的 盒 式 测量 仪器 ,并 配置 了 各 种 选 件 , 因 而 可 
以 完成 一 系列 的 RF 测试 任务 ,并 让 设备 拥有 者 拓展 测试 设备 的 使 用 寿命 和 拥有 更 大 的 灵活 
性 ,满足 了 2G 向 3G 测试 的 过 渡 和 下 一 代 手 机 对 测试 设备 的 需要 。 

R&S 的 CMU200 就 是 这 样 的 一 种 设备 。 围 绕 这 样 一 个 通用 测试 平台 ,可 以 根据 需要 采 
购 相应 的 选 件 ,将 其 分 别 配 置 成 满足 GSM \IS-95 \IS-136、.AMPS 蓝牙 .UMTS 和 W-CDMA 
标准 要 求 的 测试 设备 。 此 外 ,Agilent 的 TS-5550 也 是 类 似 这 样 的 综合 测试 设备 , 它 支 持 功能 
测试 .RF 测试 .音频 .电池 和 充电 电路 等 测试 。 
手机 测试 的 内 容 除 了 上 述 测试 内 容 之 外 ,还 包括 : 
Q@ 软件 压力 测试 。 用 自动 测试 软件 连续 给 手机 拨打 1000 个 电话 ,检查 手机 是 否 会 发 生 
故障 。 

@ 抗 摔 性 测试 。 抗 摔 性 测试 由 专门 人 员 完 成 。 

@ 高 温 低温 测试 。 让 手机 处 于 高 低 不 同 的 温度 来 检测 手机 的 适应 性 。 

@ 高 湿度 测试 。 用 一 个 专门 的 箱子 来 操作 滴水 测试 ,模拟 人 出 汗 的 情况 (水 里 面 挫 有 一 
定 比例 的 盐 ) 。 

@ 百 格 测试 。 用 H4 的 铅笔 在 手机 的 外 壳 画 100 个 格子 ,看 看 外 过 会 不 会 掉 油 漆 。 

@ 翻盖 测试 。 对 翻盖 手机 进行 翻盖 10 万 次 ,检查 壳 体 的 损耗 情况 。 

@ 扭矩 测试 。 用 夹具 夹 住 直 板 机 两 头 , 一 头 左 拧 , 一 头 右 拧 ,测试 壳 体 和 手机 里 面 大 型 器 
件 的 强度 。 


@ 静电 测试 。 北 方 天 气 干燥 , 手 摸 金属 的 东西 容易 产生 静电 , 击 穿 手机 电路 ,由 专门 的 静 
电 枪 和 铜板 来 测试 。 

@ 按键 测试 。 借 助 机 器 以 给 定 的 力量 击 打 键 盘 10 万 次 。 

@ 沙 尘 测试 。 手 机 放 和 人 特定 的 箱子 ,细小 的 沙子 被 鼓吹 起 来 , 数 小 时 后 ,查看 手机 里 面 是 
否 有 沙子 进入 ,如 果 有 ,那么 手机 密闭 性 不 好 ,结构 设计 有 待 重新 调整 。 

3. 手机 测试 的 流程 标准 

目前 , 绝 大 多 数 国内 定点 的 CDMA 手机 生产 企业 都 选择 采用 SKD(Sack Knock Down) 散 
件 组 装 的 方式 来 生产 手机 ,这 是 因为 与 OEM(Orignal Equipment Manufacture) 贴 牌 或 CKD 
(Completed Knock Down) 的 方式 相 比 较 , 采 用 SKD 方式 具有 投资 少 、 见 效 快 ,技术 风险 低 、 项 
目 启动 快 ,容易 组 织 规模 生产 .可 在 一 定 程 度 上 降低 成 本 .产品 上 市 快 的 优势 。 在 SKD 生产 方 
式 条 件 下 ,如 何在 进行 CDMA 手机 的 测试 和 性 能 评估 中 保证 产品 质量 和 测试 速度 ,这 是 国内 
许多 CDMA 手机 生产 企业 面临 的 一 个 技术 问题 。 如 何 解决 好 该 问题 对 于 生产 厂家 来 说 具有 
重要 的 工程 意义 和 现实 意义 。 

1) SKD 测试 方案 的 指导 思想 

O@ 满足 相关 的 技术 规范 和 测试 标准 。 

@ 具有 足够 的 测试 速度 和 精度 。 

@ 在 满足 生产 线 产能 要 求 的 前 提 下 ,设备 投入 要 经 济 , 这 包括 购买 CDMA 手机 综合 测试 
仪 、 传 输 带 设备 .测试 夹具 .其 他 的 测试 设备 ,生产线 统计 管理 设备 等 。 

@ 拟 购买 测试 仪器 的 技术 指标 、 型 号 ,规格 .数据 等 项 要 求 , 既 要 能 满足 现 阶 段 的 综合 要 
求 ,也 要 考虑 到 未 来 的 可 扩充 性 、 可 升级 性 、 可 维修 性 。 

@ 尽量 少 占用 公司 的 各 类 资源 ,包括 人 力 物力、 财力 、 生 产 场 地 空调、 电力、 压缩 空气 等 。 

@ 尽 可 能 地 充分 利用 现 有 的 GSM 手机 生产 线条 件 ( 若 有 的 话 ) 来 对 生产 线 进行 改进 、 调 
整 和 优化 ,以 进一步 降低 生产 手机 的 成 本 。 

2) CDMA 手机 功能 测试 项 分 类 ,测试 规模 和 相关 的 标准 

GO RF 收发 信和 机 指标 测试 (测试 发 射 功 率 、 发 射频 谱 、 接 收 灵敏度 等 ): 测试 标准 为 中 华 
人 民 共 和 国 通信 行业 标准 YD/T 1050 一 2000 .美国 TIAIS 一 98 双 模 移动 台 最 低 性 能 标准 、 
800MHzCDMA 数字 蜂窝 移动 通信 网 空中 接口 技术 要 求 。 

@ 音频 指标 测试 : 检查 或 测试 发 送 音 频 灵敏 度 \、 振 铃 响 度 、 受 话 器 响 度 、 失 真 度 、 侧 音 、 免 

@ LCD 和 菜单 功能 的 检查 : 是 否 与 说 明 书 中 所 述 内 容 相 一 致 。 

@ 各 按键 触觉 和 力度 的 检查 。 

@ 电池 质量 的 检查 : 检查 电池 与 主板 的 电气 连接 质量 是 否 可 靠 , 测 量 电 池 容 量 、 输 出 电 
压 短路 保护 等 指标 。 

充电 器 质量 检查 : 检查 充电 器 与 主板 的 电气 连接 质量 是 否 可 靠 , 测 试 输入 特性 、 输 出 
特性 、 充 电 特 性 、 充 电 时 来 电 、 充 电 时 去 电 、 对 地 汇 漏 电流 等 指标 。 

@ 可靠 性 测试 : 通过 对 手机 施加 一 定 的 外 界 环境 应 力 ( 高 温 、 低 温 、 振 动 ) 来 检查 产品 的 
可 靠 性 指标 。 这 一 点 很 重要 , 它 可 以 发 现 不 少 产品 质量 问题 。 测 试 标准 为 GB/T 2423. 8 一 
1995: 电工 电子 产品 环境 试验 。 

@ 在 实际 CDMA 通信 网络 中 的 外 场 测试 : 该 项 测试 需 在 不 同 的 时 间 、 不 同 的 地 点 /地 
貌 .与 不 同 网 络 中 的 用 户 进行 互 连 互通 等 环境 条 件 下 进行 测试 和 检查 。 


@@ 手机 壳 体 质量 的 检查 。 

@ 软件 .MMI 操作 可 靠 性 与 稳定 性 检查 。 

四 DC 功 耗 指标 : 关机 电流 、 待 机 电流 、 通 话 电 流 、 待 机 时 间 的 测试 。 

上 述 CDMA 手机 SKD 生产 测试 方案 中 的 大 部 分 内 容 也 可 以 用 于 GSM 手机 的 SKD 生 
产 审 * 


9.5 负载 压力 测试 


9.5.1 负载 压力 测试 基础 


负载 压力 测试 是 在 一 定 约束 条 件 下 测试 系统 所 能 承受 的 并 发 用 户 量 .运行 时 间 .运行 数据 
量 , 以 确定 系统 所 能 承受 的 最 大 负载 压力 。 负 载 压 力 测试 有 助 于 确认 被 测 系统 是 否 能 够 支持 
性 能 需求 ,以 及 预期 的 负载 增长 等 。 负 载 压 力 测试 不 是 只 关注 不 同 负载 场景 下 的 响应 时 间 等 
指标 , 它 也 要 通过 测试 来 发 现在 不 同 负载 场景 下 会 出 现 的 ,例如 速度 变 慢 内 存 泄漏 等 问题 并 
找 出 其 原因 。 负 载 压力 测试 是 性 能 测试 的 重要 组 成 部 分 。 

1. 负载 测试 

术语 “负载 测试 ?在 测试 文献 资料 中 通常 都 定义 为 给 被 测 系统 逐渐 施加 它 所 能 操作 的 最 大 
任务 数 的 过 程 , 也 就 是 说 负载 测试 是 通过 逐步 增加 系统 负载 ,测试 系统 性 能 的 变化 ,并 最 终 确 
定 在 满足 性 能 指标 的 情况 下 ,系统 所 能 承受 的 最 大 负载 量 的 测试 。 负 载 测试 有 时 也 被 称 为 “ 容 
量 测试 ”, 或 者 “耐久 性 测试 或 持久 性 测试 >。 有 一 种 比较 特别 的 容量 测试 叫做 * 零 容量 测试 ”， 
它 是 给 系统 加 上 空 任务 而 进行 的 测试 。 

负载 测试 的 例子 很 多 ,如 通过 编辑 一 个 巨大 的 文件 来 测试 文字 处 理 软 件 ; 通过 发 送 一 个 
巨大 的 作业 来 测试 打印 机 ; 通过 成 千 上 万 的 用 户 邮 箱 来 测试 邮件 服务 器 ; 大 量 用 户 同时 做 
ATM 交易 ; 在 一 个 循环 中 不 停 地 运行 客户 端 超过 规定 的 扩展 时 间 段 等 。 

2. 压力 测试 

压力 测试 是 通过 逐步 增加 系统 负载 ,测试 系统 性 能 的 变化 ,并 最 终 确定 在 什么 负载 条 件 下 
系统 性 能 处 于 失效 状态 ,并 以 此 来 获得 系统 能 提供 的 最 大 承受 能 力 级 别 的 测试 。 通 俗 地 讲 , 压 
力 测 试 是 为 了 发 现在 什么 条 件 下 系统 的 性 能 会 变 得 不 可 接受 ,或 者 说 系统 瘫痪 或 骨 溃 。 可 见 ， 
压力 测试 是 一 种 特定 类 型 的 负载 测试 。 例 如 ,访问 一 个 页 面 的 响应 时 间 规 定 为 不 超过 1s, 负 载 测 
试 就 是 测试 在 响应 时 间 为 1s 时 ,系统 所 能 承受 的 最 大 并 发 访问 用 户 的 数量 ,而 压力 测试 就 是 测 
试 系统 在 多 大 的 并 发 访问 用 户 数量 下 ,响应 时 间 不 可 接受 ,例如 超过 lmin( 定 义 为 失效 状态 ) 。 

压力 测试 在 某 些 情况 下 又 叫做 负面 测试 。 进 行 压 力 测试 的 主要 目的 是 为 了 使 系统 出 故障 
且 出 故障 时 系统 能 适当 地 恢复 ,而 系统 恢复 得 如 何 的 特性 则 叫做 可 恢复 性 。 下 面 是 一 些 对 系 
统 进行 压力 测试 的 例子 : 两 倍 的 并 发 用 户 数 或 者 HTTP 连接 数 ; 随机 的 关闭 及 重启 连接 到 服 
务 器 上 的 网 络 集线器 /路 由 器 的 端口 (例如 可 以 通过 SNMP 命令 来 实现 ); 把 数据 库 断 线 , 然 
后 再 重启 ; 当 系 统 还 在 运行 的 时 候 , 重 建 一 个 RAID 阵列 ; 在 Web 和 数据 库 服务 器 上 运行 消 
耗资 源 ( 如 CPU 内存、 磁盘 和 网 络 等 ) 的 进程 等 。 

3. 性 能 测试 

系统 的 性 能 是 一 个 很 大 的 概念 ,覆盖 面相 当 广泛 ,对 一 个 软件 系统 而 言 ,包括 执行 效率 , 资 
源 占用 、 稳 定性 ,安全 性 、 兼 容 性 可 扩展 性 和 可 靠 性 等 ,这 里 重点 讨论 的 负载 压力 是 系统 性 能 


的 一 个 重要 方面 。 性 能 测试 用 来 保证 产品 发 布 后 系统 的 性 能 指标 能 够 满足 用 户 需 求 。 性 能 测 
试 在 软件 质量 保证 中 起 重要 作用 ,通常 情况 下 存在 性 能 调 优 与 性 能 评测 两 种 性 能 测试 策略 。 

4. 负载 压力 测试 的 目的 

假设 一 个 银行 系统 在 每 天 的 ATM 交易 高 峰 时 出 现 这 样 的 抱怨 :“ 这 个 系统 怎么 了 ,每 天 
上 午 10 点 左右 交易 时 系统 响应 时 间 太 慢 了 ,经 常 出 现 交 易 超 时 或 交易 失败 ,到 底 问 题 在 哪里 ?” 
作为 系统 开发 人 员 可 能 会 问 :“ 在 客户 要 求 的 特定 的 系统 配置 下 ,开发 的 系统 怎么 样 才能 达到 最 
好 的 性 能 呢 ?” 或 者 会 考虑 待 开 发 的 系统 应 该 选择 什么 样 的 服务 器 配置 数据库 配置 和 网 络 , 开 发 
怎样 的 应 用 系统 才能 达到 客户 的 性 能 要 求 呢 ? 这 些 问 题 最 终 只 有 通过 负载 压力 测试 才能 得 到 答 
案 , 由 此 决定 了 负载 压力 测试 的 目的 。 负 载 压力 测试 的 目的 可 以 概括 为 以 下 几 个 方面 

(1) 在 生产 或 真实 环境 下 测试 系统 性 能 ,评估 系统 性 能 以 及 服务 等 级 是 否 满足 特定 的 需求 。 

例如 电信 计 费 软件 ,众所周知 ,在 每 月 的 规定 时 间 区 间 内 是 市 话 交 费 的 高 峰 期 ,在 缴费 主 
机 系统 覆盖 的 范围 内 可 能 有 几 千 个 收费 网 点 同时 启动 。 收 费 过 程 一 般 分 为 两 步 ,首先 要 根据 
用 户 提出 的 电话 号 码 来 查询 出 其 当月 产生 费用 ,然后 收取 现金 或 者 从 个 人 账户 代 扣 并 将 此 用 
户 修改 为 已 交 费 状态 。 一 个 看 起 来 简单 的 两 个 步骤 ,当成 百 上 千 的 终端 同时 执行 这 样 的 操作 
时 情况 就 大 不 一 样 了 ,如 此 众多 的 交易 同时 发 生 , 对 应 用 程序 本 身 .操作 系统 .中 心 数据 库 服务 
器 .中 间 件 服务 器 .网络 设 备 的 承受 力 都 是 一 个 严峻 的 考验 。 决 策 者 需要 模拟 系统 负载 压力 ， 
预见 软件 的 并 发 承受 力 , 这 是 在 测试 阶段 就 应 该 解决 的 重要 问题 。 

一 个 企业 自己 组 织 力量 或 委托 软件 公司 开发 的 业务 应 用 系统 投入 生产 环境 之 后 ,往往 可 
能 会 产生 这 样 一 个 问题 , 即 这 套 系统 能 不 能 承受 大 量 的 并 发 用 户 同时 访问 ,这 个 问题 是 系统 负 
载 压力 需求 的 体现 。 

强调 在 生产 或 真实 环境 下 测试 系统 性 能 ,在 实施 过 程 中 这 样 做 会 遇 到 很 多 困难 和 阻力 , 比 
如 系统 上 线 运行 之 后 ,真实 环境 下 不 允许 负载 压力 测试 为 系统 带 来 大 量 的 垃圾 数据 ,测试 数据 
与 真实 业务 数据 混在 一 起 无 法 控制 测试 结果 ,负载 压力 测试 如 果 使 服务 器 宕 机 会 给 系统 带 来 
巨大 损失 等 。 那 么 在 这 种 条 件 不 允许 的 情况 下 ,应 该 采用 什么 样 的 措施 弥补 呢 ? 可 以 使 用 一 
种 “模拟 环境 "来 做 测试 ,这 种 环境 是 指 在 与 实际 真实 应 用 环境 基本 相同 或 保持 一 致 的 环境 中 
进行 测试 。 

(2) 预见 系统 负载 压力 承受 力 ,在 应 用 实际 部 署 之 前 评估 系统 性 能 。 

目前 的 大 多 数 企业 应 用 系统 需要 支持 成 千 上 万 的 用 户 , 各 类 应 用 环境 ,以 及 由 不 同 供应 商 
的 元 件 组 装 起 来 的 复杂 系统 ,难以 预知 系统 负载 ,使 企业 担心 会 发 生 系统 投入 生产 后 性 能 差 ， 
用 户 交易 时 反应 慢 , 甚 至 出 现 系 统 失灵 等 问题 。 其 结果 就 是 直接 导致 企业 的 收益 损失 。 测 试 
系统 性 能 强调 对 系统 当前 性 能 的 评估 ,通过 评估 ,可 以 在 应 用 实际 部 署 之 前 预见 系统 负载 压力 
承受 力 。 这 种 测试 的 意义 在 于 指导 系统 总 体 设计 , 既 可 以 避免 浪费 不 必要 的 人 力 、 物 力 和 财 
力 ,又 可 以 避免 硬件 和 软件 的 设计 不 匹配 ,使 系统 具有 更 长 .更 健壮 的 生命 力 。 

如 何 确定 系统 的 “负载 压力 承受 力 ” 是 一 个 非常 复杂 且 关 键 的 问题 ,会 在 后 面 的 章节 中 详 
细 论 述 。 对 于 系统 性 能 测试 ,有 时 我 们 所 从 事 的 工作 仅仅 是 被 动 监控 一 些 性 能 指标 ,而 要 预见 
系统 负载 压力 , 则 不 可 避免 地 会 借助 自动 化 的 负载 压力 测试 工具 。 

(3) 分 析 系 统 瓶颈 、 优 化 系统 。 

系统 性 能 检测 和 预见 为 分 析 系统 瓶 项 和 优化 提供 了 原始 数据 , 打 好 了 基础 。 瓶 颈 这 个 术 
语 来 源 于 玻璃 瓶 与 瓶 身 相 比 收缩 了 的 部 分 。 收 缩 的 瓶颈 将 引起 流量 的 下 降 , 从 而 限制 了 液体 
流出 瓶 外 的 速度 。 类 似 地 ,在 负载 压力 测试 中 “瓶颈 这 个 术语 用 来 描述 那些 限制 系统 负载 压 


力 性 能 的 因素 。 我 们 给 系统 瓶颈 一 个 简单 定义 , 即 应 用 系统 中 导致 系统 性 能 大 幅 下 降 的 原因 。 
瓶颈 大 大 降低 了 系统 性 能 ,测试 工程 师 的 职责 之 一 就 是 降低 或 者 消除 系统 中 的 瓶颈 。 一 般 情 
况 下 ,发现 瓶 颈 并 找 出 原因 并 不 是 一 件 容易 的 事 , 很 多 时 候 可 能 无 法 准确 定位 系统 瓶颈 之 所 
在 。 瓶 颈 可 能 定位 在 硬件 中 ,可 能 定位 在 软件 中 ,也 可 能 在 网 络 或 者 数据 库 中 。 对 应 用 软件 本 
身 来 讲 ,瓶颈 可 能 定位 在 开发 的 应 用 程序 中 ,也 可 能 跟踪 定位 在 操作 系统 或 者 数据 库 内 部 ,这 
种 瓶颈 的 分 析 就 需要 借助 于 相关 的 工具 才能 定位 。 数 据 库 和 操作 系统 的 开发 者 们 都 一 直 在 测 
试 其 产品 的 新 版 本 ,以 期 能 尽 其 所 能 地 排除 产品 中 存在 的 瓶颈 。 硬 件 中 的 瓶颈 可 能 会 非常 容 
易 排 除 ,一 般 来 讲解 决 硬件 瓶颈 的 方法 只 是 简单 地 向 系统 中 添加 CPU 、 磁 盘 或 者 内 存 等 ,如 果 
硬件 瓶颈 是 由 于 系统 缓冲 区 设计 或 内 存 总 线 造成 的 ,那么 通常 情况 下 就 无 能 为 力 了 。 硬 件 瓶 
颈 、 软 件 或 其 他 因素 引起 的 瓶颈 ,建议 先 解决 软件 瓶颈 , 原 因 有 4 个 : 一 是 软件 瓶颈 往往 导致 
系统 性 能 衰减 更 快 , 反 过 来 讲 ,消除 软件 瓶颈 ,系统 性 能 提升 更 快 ; 二 是 人 为 因素 更 易 导 致 软 
件 瓶颈 ,要 消除 软件 瓶颈 ,开发 人 员 会 更 主动 ,并 且 可 以 节省 资源 ; 三 是 盲目 增加 硬件 无 形 中 
增加 了 系统 费用 ,将 来 软 硬 件 不 匹配 的 问题 终究 还 会 暴露 出 来 ; 四 是 系统 的 有 些 瓶 颈 看 似 是 
由 应 用 软件 引起 的 ,而 实际 上 可 能 是 由 网 络 或 数据 库 引 起 的 ,这 样 可 以 从 软件 人手 进行 跟踪 定 
位 ,找到 真正 的 系统 瓶颈 原因 。 

优化 调整 系统 是 在 发 现 瓶 天 , 故 障 定位 之 后 要 完成 的 事情 ,实现 优化 之 后 即 可 消除 瓶颈 ， 
提高 性 能 。 建 议 将 负载 压力 问题 分 为 两 类 : 一 类 是 需要 优化 的 性 能 问题 ,这 类 问题 如 果 不 解 
决 可 能 导致 系统 性 能 大 幅度 下 降 , 或 者 会 造成 系统 瘫痪 ; 另 一 类 是 非 系 统 优化 所 能 解决 的 性 
能 问题 。 这 里 讨论 的 是 前 者 ,导致 系统 性 能 下 降 的 因素 来 自 许多 方面 ,例如 1/O 过 载 . 内 存 不 
足 .数据库 资 源 匮 乏 、 网 络 速度 低 ,硬件 资源 不 足 、 操 作 系 统 资源 不 足 ,应 用 程序 架构 存在 缺陷 、 
软 硬 件 配置 不 恰当 等 。 优 化 调整 即 是 对 症 下 药 , 做 到 药 到 病 除 。 来 看 一 个 例子 ,如 果 是 磁盘 
1/O 导致 了 系统 瓶 贷 , 那 么 消除 它 的 方法 可 能 是 重新 设计 数据 库 。 

在 系统 优化 调整 领域 有 许多 指导 性 文件 ,例如 IBM 针对 其 产品 DB2、WebSphere、CM、 
Portal 等 都 提供 了 专门 的 Tuning Guide, 并 且 配 合 以 培训 。 我 们 知道 ,各 个 组 成 部 分 的 最 优 并 
不 代表 系统 性 能 可 以 达到 最 优 ,每 个 组 成 单元 都 具备 一 些 调 优 指标 ,每 个 指标 的 调整 并 非 最 大 
就 好 ,或 者 最 小 就 好 ,也 很 少 存在 在 某 个 范围 是 最 好 这 种 情况 。 给 测试 工程 师 的 建议 是 调 优 的 
最 终 目 的 是 各 个 指标 的 调整 取得 系统 的 平衡 点 , 即 达到 了 系统 性 能 的 最 佳 点 。 由 此 可 见 , 负 载 
压力 测试 将 为 企业 应 用 项 目的 实施 增加 信心 ,帮助 用 户 正 确 地 进行 容量 规划 ,实现 软 硬 件 投资 
合理 化 ,最 终 交 付 高 质量 的 系统 ,避免 项 目 投产 失败 ,保证 用 户 的 投资 得 到 相应 的 回报 。 


9.5.2 负载 压力 测试 的 策略 


负载 压力 测试 可 以 采取 利用 手工 进行 测试 和 利用 自动 化 负载 压力 测试 工具 进行 测试 两 种 
测试 策略 。 手 工 测 试 方法 ,比如 可 以 手工 模拟 负载 压力 ,方法 是 找 若干 台 计 算 机 和 同样 数目 的 
操作 人 员 在 同一 时 刻 进 行 操作 ,然后 用 秒表 记录 下 响应 时 间 ,这 样 的 手工 测试 方法 可 以 大 致 反 
映 系统 所 能 承受 的 负载 压力 情况 。 但 是 ,这 种 方法 需要 大 量 的 人 员 和 机 器 设备 ,而 且 测 试 人 员 
的 同步 问题 无 法 解决 ,更 无 法 捕 提 程序 内 部 的 变化 情况 。 利 用 自动 化 负载 压力 测试 工具 进行 
测试 可 以 很 好 地 解决 这 些 问 题 。 利 用 自动 化 负载 压力 测试 工具 可 以 在 一 台 或 几 台 PC 上 模拟 
成 百 或 上 千 的 虚拟 用 户 同 时 执行 业务 的 情景 ,通过 可 重复 的 真实 的 测试 能 够 彻底 地 度量 应 用 
的 性 能 ,确定 问题 所 在 。 可 见 , 负 载 压 力 测试 的 发 展 趋势 是 利用 自动 化 的 测试 工具 进行 测试 ， 
当然 在 没有 工具 的 情况 下 ,也 可 以 通过 手工 测试 对 系统 承受 负载 压力 情况 做 一 个 近似 的 评估 。 


下 面 重点 介绍 一 下 利用 自动 化 测试 工具 进行 负载 压力 测试 的 策略 ,分别 是 利用 商业 化 测试 工 
具 进 行 测试 ,利用 开放 资源 测试 工具 进行 测试 。 

(1) 利用 商业 化 测试 工具 进行 负载 压力 测试 。 

利用 商业 化 的 自动 化 测试 工具 是 进行 负载 压力 测试 的 主要 手段 ,知名 的 商业 化 测试 工具 ， 
比如 LoadRunner\QALoad IBM rational performance tester、web application stress 等 , 适 
范围 非常 广 , 一 般 都 经 过 了 长 时 间 实 践 检验 ,测试 效果 得 到 业界 的 普遍 认可 ,测试 结果 具有 一 
定 的 可 比 性 ,并 且 厂 商 能 提供 很 好 的 技术 支持 ,其 版 本 的 升级 也 会 得 到 保证 。 但 是 商业 化 的 自 
动 化 测试 工具 一 般 价格 较 高 ,如 果 考 虑 价格 因素 ,那么 利用 开放 资源 工具 进行 测试 也 是 一 个 选 
择 的 策略 。 

(2) 利用 开源 测试 工具 进行 负载 压力 测试 。 

开源 被 定义 为 用 户 不 侵犯 任何 专利 权 和 著作 权 , 以 及 无 须 通过 专利 使 用 权 转 让 就 可 以 获 
取 、 检 测 、 更 改 的 软件 源 代码 ,这 意味 着 任何 人 都 有 权 访 问 、 修 改 、 改 进 或 重新 分 配 源 代码 。 开 
源 的 理念 是 人 们 可 以 在 已 存在 的 工具 上 不 断 地 共同 开发 ,最 终 产品 将 更 加 完善 和 先进 。 简 而 
言 之 ,很 多 企业 和 个 体 都 会 从 中 获 益 。 开 源 的 最 大 优点 是 测试 工具 是 免费 的 。 如 Jmeter、 
siege 和 webload 等 都 是 常用 的 开源 负载 压力 测试 工具 。 


9.5.3 负载 压力 测试 的 解决 方案 和 实施 


1. 负载 压力 测试 的 解决 方案 

系统 的 并 发 性 能 是 负载 压力 性 能 最 主要 的 组 成 部 分 ,首先 来 讨论 什么 是 “并 发 ”。 对 一 个 
系统 来 讲 , 某 些 业务 操作 对 特定 角色 用 户 来 说 存在 很 大 的 同时 操作 的 可 能 性 。 例 如 ,网 上 购物 
系统 的 订单 提交 、 订 票 系统 的 票 源 查询 ,人力 资源 系统 月 末 及 年 末 报 表 上 传 等 ,客户 端 大 量 的 
并 发 操作 提高 了 网 络 的 吞吐 量 , 加 剧 了 服务 器 资源 互 斥 访 问 。 冲 突 加 大 了 数据 库 死 锁 的 可 能 。 
这 样 的 负载 压力 轻 则 会 导致 系统 性 能 低下 , 重 则 会 对 系统 造成 破坏 ,给 用 户 带 来 经 济 损失 。 因 
此 并 发 性 能 的 测试 对 于 保证 系统 的 性 能 是 非常 关键 的 。 

那么 在 实际 操作 中 ,采取 什么 样 的 方案 来 实施 这 一 类 操作 呢 ? 首先 并 发 负载 压力 的 实施 
是 在 客户 端 ,负载 压力 的 传输 介质 是 网 络 ,最 终 压力 会 到 达 后 台 各 类 服务 器 ,包括 Web 服务 
器 .应 用 服务 器 数据库 服务 器 以 及 系统 必须 的 服务 器 ,例如 银行 系统 服务 器 .电信 主机 服务 
器 .认证 服务 器 、 检 索 服务 器 等 。 所 以 ,在 并 发 性 能 测试 过 程 中 ,关注 点 包括 客户 端的 性 能 .应 
用 在 网 络 上 的 性 能 以 及 应 用 在 服务 器 上 的 性 能 。 为 什么 这 些 内 容 都 是 必须 的 呢 ? 大 家 知道 ， 
测试 首先 要 定位 问题 ,最 终 目的 是 为 了 解决 问题 ,这 些 关注 点 正 是 定位 问题 的 必要 条 件 。 下 面 
将 详细 论述 这 些 重点 内 容 。 

1) 客户 端 性 能 测试 

在 客户 端 模 拟 大 量 并 发 用 户 执 行 不 同业 务 操作 ,达到 实施 负载 压力 的 目的 。 

一 般 采 用 负载 压力 测试 工具 来 模拟 大 量 并 发 用 户 ,主要 组 成 部 分 包括 主 控 台 、 代 理 机 以 及 
被 测 服务 器 ,各 部 分 采用 网 络 连接 。 主 控 台 负责 管理 各 个 代理 以 及 收集 各 代理 测试 数据 ,代理 
负责 模拟 虚拟 用 户 加 压 。 在 每 次 并 发 性 能 测试 中 只 有 一 台 主 控 台 ,但 可 以 有 多 个 代理 。 如 何 
模拟 负载 压力 呢 ? 总 的 原则 是 最 大 限度 地 模拟 真实 负载 压力 。 要 做 到 这 一 点 ,既是 对 测试 工 
具 的 考验 ,又 是 对 测试 工程 师 经 验 与 智慧 的 考验 。 

2) 网 络 的 性 能 测试 

主要 包括 两 部 分 内 容 : 一 是 网 络 应 用 性 能 监控 ; 二 是 应 用 网 络 故障 分 析 。 应 用 网 络 故障 


分 析 的 测试 目标 是 显示 网 络 带 宽 延迟、 负载 和 TCP 端口 的 变化 是 如 何 影响 用 户 的 响应 时 间 
的 。 通 过 测试 可 以 达到 如 下 目的 : 

(1) 优化 性 能 ; 

(2) 预测 系统 响应 时 间 ; 

(3) 确定 网 络 带 宽 需 求 ; 

(4) 定位 应 用 程序 和 网 络 故 障 。 

在 测试 过 程 中 借助 于 网 络 故 障 分 析 工 具 , 可 以 解决 下 列 问题 : 

(1) 使 应 用 跨越 多 个 网 段 的 活动 过 程 变 得 清晰 ; 

(2) 提供 有 关 应 用 效率 的 统计 数据 ; 

(3) 模拟 最 终 用 户 在 不 同 网 络 配置 环境 下 的 响应 时 间 ,决定 应 用 运行 的 最 佳 网 络 环境 。 

3) 服务 器 端的 性 能 测试 

这 里 谈 到 的 “测试 的 概念 就 是 对 服务 器 执行 监控 ,监控 的 内 容 主要 包括 操作 系统 .数据库 
以 及 中 间 件 等 。 目 前 监控 的 手段 可 以 采用 工具 自动 监控 ,也 可 以 使 用 操作 系统 、 数 据 库 .中 间 
件 本 身 提供 的 监控 工具 。 利 用 工具 监控 有 下 列 优点 : 

(1) 减少 故障 诊断 和 分 析 时 间 

(2) 减少 手工 定位 的 时 间 和 避免 误诊 ; 

(3) 在 问题 发 生前 定位 故障 ; 

(4) 验证 可 达到 的 性 能 水 平和 服务 水 平 协 议 ; 

(5) 持续 的 服务 器 ,数据 库 和 应 用 性 能 及 可 用 性 监控 ; 

(6) 故障 诊断 和 恢复 : 自动 报警 .故障 恢复 程序 ,故障 恢复 信息 ; 

(7) 服务 器 .应 用 可 用 性 和 性 能 报告 。 

操作 系统 数据库、 中间 件 本 身 提 供 的 监控 工具 有 时 采用 命令 性 的 方式 ,有 时 具备 友好 的 
图 形 界面 ,例如 ,Saloris 监控 服务 器 资源 占用 可 以 使 用 vmstat 或 者 iostat 命令 , Web 应 用 中 间 
件 Websphere 的 监控 可 以 采用 系统 本 身 提供 的 Web 页 面 的 监控 工具 ,当然 也 有 一 些 用 于 特 
定 系统 的 监控 工具 。 

操作 系统 的 监控 涉及 后 台 重要 服务 器 操作 系统 监控 ,如 果 系 统 采用 负载 均衡 机 制 ,那么 还 
有 必要 验证 负载 均衡 是 否 能 处 理 大 的 客户 端 压力 ,并 且 正 确实 现 负载 均衡 。 操 作 系统 有 很 多 
种 类 型 ,监控 的 指标 也 不 尽 相 同 ,但 对 于 主流 的 操作 系统 ,我 们 最 关注 的 指标 包括 三 个 , 即 
CPU、 内 存 以 及 硬盘 。 通 过 操作 系统 监控 工具 可 以 监视 操作 系统 资源 的 使 用 情况 ,间接 地 反 
映 了 各 javascript 服务 器 程序 的 运行 情况 。 根 据 运行 结果 分 析 可 以 帮助 我 们 快速 定位 系统 问 
题 范围 或 者 性 能 瓶颈 点 。 因 此 操作 系统 的 监控 是 不 容 忽 视 的 ,例如 用 于 AIX 及 Linux 操作 系 
统 的 监控 工具 nmon。 

有 关 数 据 库 的 测试 在 9. 3 节 已 经 作 了 详细 的 分 析 , 这 里 仅仅 从 数据 库 的 负载 压力 的 角度 
做 一 些 分 析 。 数 据 库 的 负载 压力 监控 或 性 能 监控 非常 复杂 ,不同 数据 库 监 控 的 指标 存在 差异 ， 
这 里 将 共性 的 指标 抽取 出 来 ,如 下 所 示 。 
监控 数据 库 系 统 中 关键 的 资源 ; 
监测 读 写 页 面 的 使 用 情况 ; 
监控 超出 共享 内 存 缓 冲 区 的 操作 数 ; 
监测 上 一 轮 查询 期 间作 业 等 待 缓冲 区 的 时 间 ; 
跟踪 共享 内 存 中 物理 日 志和 逻辑 日 志 的 缓冲 区 的 使 用 率 ; 


。 监控 磁盘 的 数据 块 使 用 情况 以 及 被 频繁 读 写 的 热点 区 域 ; 

。 监控 用 户 事务 或 者 表 空 间 监控 事务 日 志 ; 

。 监控 数据 库 锁 资源 ; 

。 监测 关键 业务 的 数据 表 的 表 空 间 增长 ; 

。 监控 SQL 执行 情况 。 

下 面 举 一 个 数据 库 Oracle 资源 监控 的 例子 ,可 以 看 到 重点 关注 的 内 容 , 这 些 内 容 包括 内 
存 利用 、 事 件 统计 、SQL 分 析 和 会 话 统计 等 。 

(1) 内 存 利用 。 

QD db blockgets; 

@) db block changes; 

© global cache gets; 


@ global cache get time。 

(2) 事件 统计 。 

© enqueue waits; 

@ shared hash latch upgrades 一 no wait; 

人 @ shared hash latch upgrades 一 wait; 

@ redo log space wait time。 

(3) SQL 分 析 。 

©@ table scan rows gotten; 

©@ table scans(long tables) ; 

@ table scans(short tables) ; 

@ index fast full scans(Cfull) 。 

(4) 会 话 统计 。 

CD session logical reads; 

© session stored procedure space; 

人 @ CPU used by this session; 

图 session connect time。 

中 间 件 服务 器 包括 Web 服务 器 ,例如 Apache; Web 应 用 服务 器 ,例如 Websphere 和 
WebLogic; 应 用 服务 器 ,例如 tuxedo 等 。 国 产 中 间 件 目前 也 在 广泛 地 使 用 ,例如 TongLink 
等 。 中 间 件 是 客户 端 负载 压力 的 直接 承受 者 ,起 到 承上启下 的 作用 ,中 间 件 的 资源 使 用 的 是 否 
合理 ,与 客户 端 以 及 与 后 台数 据 库 服务 器 连接 是 否 合理 ,都 直接 影响 系统 的 性 能 。 

中 间 件 的 监控 要 得 到 哪些 指标 的 值 ? 以 及 怎样 分 析 结 果 值 ? 这 里 以 中 间 件 WebSphere 
为 例 分 析 其 资源 监控 指标 ,这 些 指标 包括 : 

。 Event-Queue Depth High(events per second) : 队列 深度 达到 配置 的 最 大 深度 时 触发 


的 事件 。 
。 Event-Queue Depth Low(events per second) : 队列 深度 达到 配置 的 最 小 深度 时 触发 
的 事件 。 


Event-Queue Full(events per second) : 将 消息 放 到 已 满 的 队列 时 触发 的 事件 。 
Event-Queue Service Interval High(events per second) : 在 超时 闪 值 内 没有 消息 放 到 
队列 或 者 没有 从 队列 检索 到 消息 时 触发 的 事件 。 


。 Event-Queue Service Interval OK(events per second) : 在 超时 赣 值 内 消息 已 经 放 到 队 
列 或 者 已 经 从 队列 检索 到 消息 时 触发 的 事件 。 

。 Status-Current Depth: 本 地 队列 上 的 当前 消息 计数 ,该 度量 只 适用 于 监视 队列 管理 器 
的 本 地 队列 。 

。 Status-Open Input Count: 打开 的 输入 句柄 的 当前 计数 。 将 打开 输入 句柄 ,以 便 应 用 
程序 可 以 将 消息 * 放 到 ”队列 。 

。 Status-Open Output Count: 打开 的 输出 句柄 的 当前 计数 。 将 打开 输出 句柄 ,以 便 应 


用 程序 可 以 从 队列 中 “获得 ”消息 。 

4) 负载 压力 测试 举例 一 一 nmon 对 操作 系统 的 监控 

(1) Nmon 介绍 。 

Nmon 是 一 种 在 Aix 与 各 种 Linux 操作 系统 上 广泛 使 用 的 监控 与 分 析 工 具 , 相 对 于 系 乡 
资源 上 的 一 些 监控 工具 来 说 ,Nmon 所 记录 的 信息 是 比较 全 面 的 , 它 能 在 系统 运行 过 程 中 
资源 的 使 用 情况 ,并 且 能 输出 结果 到 文件 中 ,然后 通 
据 文件 与 图 形 化 结果 。 

Nmon 所 记录 的 数据 包含 如 下 一 些 方面 (也 是 在 寻找 问题 过 程 中 所 关注 的 资源 点 ) : 

。 CPU 占用 率 ; 


过 nmon_analyzer 工具 产生 数 


。 内 存 使 用 情况 ; 

。 磁盘 I/O 速度 ,传输 和 读 写 比率 ; 

。 文 件 系 统 的 使 用 率 ; 

。 网 络 I/O 速度 ,传输 和 读 写 比率 、 错 误 统计 率 与 传输 包 的 大 小 ; 
。 消耗 资源 最 多 的 进程 ; 

。 计算 机 详细 信息 和 资源 ; 

。 页 面 空 间 和 页 面 I/O 速度 ; 

。 用 户 自 定义 的 磁盘 组 ; 

。 网 络 文件 系统 


另外 ,在 AIX 操作 系统 上 ,Nmon 还 能 监控 到 其 他 的 一 些 信息 ,如 异步 IO 等 。 

可 以 在 IBM 的 官方 网 站 上 免费 下 载 获 取 Nmon 与 nmon_analyzer。 

使 用 Nmon 比较 简单 ,只 要 把 Nmon 脚本 上 传 到 服务 器 中 直接 运行 即 可 ,执行 命令 如 下 
#. /nmon 或 者 #/tmp/nmon/nmon。 图 9-12 是 aix5. 3 下 使 用 的 Nmon 的 一 些 截图 。 


图 9-12 aix5. 3 下 的 Nmon 截图 


分 别 输入 c\t\n\m, 可 以 了 解 系 : 
所 示 。 


博 况 ,如 图 9-13 


图 9-13 


输入 h, 打 开 Nmon 帮助 页 面 , 如 图 : 


图 9-14 Nmon 的 帮助 界面 截图 


记录 下 来 ,可 以 通过 运行 以 下 命令 实现 : 


#./nmon -f -tt -rtest—-s30 -c180 


其 中 : test 这 次 监控 记录 的 标题 与 生产 的 文件 名 称 ; 
-s 30 一 一 每 30s 进行 一 次 数据 采集 ; 
-c 180 一 一 一 共 采 集 180 次 。 
输入 命令 后 ,将 自动 在 当前 目录 生成 一 个 hostname_ timeSeries. nmon 的 文件 ,如 
hosname 为 testl ,生产 的 文件 为 testl 090320_2213. nmon。 
通过 以 下 命令 将 Nmon 结果 转换 为 csv 文件 : 


# sort —A testl 090320_2213. nmon > test1 090320_2213.csv 


即 可 在 当前 目录 生成 test1_090320_2213. csv 文件 。 将 test1_090320_2213. csv 文件 下 载 到 本 
地 转换 为 图 形 结果 来 进行 分 析 。 

(2) Nmon 监控 结果 图 形 分 析 。 

如 何 使 用 nmon analyser. xls 工具 生成 Excel 文件 呢 ? 步骤 如 下 : 

@ 下 载 nmon analyser. xls 工具 。 

@ 打开 nmon analyser. xls 工具 。 

@ 调整 Excel 宏 安 全 性 。 选 择 “ 工 具 ” 一 “ 宏 " 一 “安全 性 ”命令 ,修改 安全 级 别 与 可 靠 发 行 
商 。 选 择 安全 级 别 为 “ 低 ”, 选 中 “信任 所 有 安装 的 加 载 项 和 模板 ”和 “信任 对 于 “Visual Baisc 项 
目 ’ 的 访问 " 复 选 框 。 

@ 修改 完 后 单 击 “ 确 定 ” 按 钮 关闭 nmon analyser. xls, 然 后 重新 打开 。 

@ 单 击 Analyse nmon data 按钮 ,加 载 之 前 下 载 的 test1_090320_2213. csv 文件 。 如 
9-15 一 图 9-17 所 示 。 

I 


System Summary test 2009-3-8 


图 9-15 ”Nmon 监控 结果 图 一 


A 日 
V3.33 13-Feb-09 


Output 

GRAPHS ~ AL™ CHARTS Speciy output option for generated graphs (see user guide) 

INTERVALS 1 9999 ”First and Last time intervals to proce 

MERGE NO NOTOP Specify YES to merge the input | 008\cpur aEDe0308 et 00320 221 3 ee) 
PIYOT NO Specify YES to generate a Pol| 

ESS YES Set to NO to prevent additional 6] EIT 
FILELIST Name of fle containing a list of n| 


和 non 一 一 一 = 


NETPACKET 


图 9-16 Nmon 监 控 结 果 图 二 
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al 1-View 


.01U 
109.01 cpu 占 用 不 高 


资源 占用 最 多 的 
进程 


图 9-17 Nmon 监控 结果 图 三 


2. 负载 压力 测试 的 实施 


负载 压力 测试 实施 的 


- 般 步骤 可 以 概括 如 下 : 


测试 计划 一 负载 压力 测试 分 析 一 测试 用 例 设计 一 测试 环境 .工具 \ 数 据 准 备 一 测试 脚本 开 
发 与 调试 一 场景 制定 一 测试 执行 一 获取 测试 结果 一 结果 评估 与 测试 报告 。 
下 面 将 详细 论述 各 部 分 的 内 容 


1) 测试 计划 

制定 一 个 全 面 的 测试 计划 是 负载 测试 成 功 的 关键 。 定 义 明 确 的 测试 计划 将 确保 制定 的 方 
案 能 完成 负载 测试 目标 。 这 部 分 内 容 描述 负载 测试 计划 过 程 ,包括 分 析 应 用 程序 .定义 测试 目 
标 、 计 划 方 案 实施 、 检 查 测试 目标 。 在 任何 类 型 的 系统 测试 中 ,制定 完善 的 测试 计划 是 成 功 完 
成 测试 的 基础 。 负 载 压力 测试 计划 的 作用 包括 : 

(1) 构建 能 够 精确 地 模拟 真实 环境 的 测试 方案 。 负 载 测 试 模拟 真实 环境 下 测试 应 用 程 
序 , 并 检测 系统 的 性 能 、 可 靠 性 和 容量 等 。 

(2) 了 解 测 试 需要 的 资源 。 应 用 程序 测试 需要 硬件 、 软 件 和 人 力 资源 。 开 始 测 试 之 前 ,应 
了 解 哪些 资源 可 用 并 确定 如 何 有 效 地 使 用 这 些 资 源 。 

(3) 以 可 度量 的 指标 定义 测试 成 功 条 件 。 明 确 的 测试 目标 和 标准 有 助 于 确保 测试 成 功 。 
仅 定义 模糊 的 目标 (如 检测 超 负载 情况 下 的 服务 器 响应 时 间 ) 是 不 够 的 。 明 确 的 成 功 条 件 应 类 
似 于 “10 000 个 客户 能 够 同时 查看 他 们 的 账户 余额 ,并 且 服 务 器 响应 时 间 不 超过 30 秒 ”。 

下 面 详细 论述 负载 压力 测试 计划 过 程 的 4 个 步骤 : 

(1) 分 析 应 用 程序 。 

负载 测试 计划 的 第 一 步 是 分 析 应 用 程序 。 应 该 对 硬件 和 软件 组 件 、 系 统 配置 以 及 典型 的 
使 用 模型 有 一 个 透彻 的 了 解 。 应 用 程序 分 析 可 以 确保 使 用 的 测试 环境 能 够 在 测试 中 精确 地 反 
映 应 用 程序 的 环境 和 配置 。 

Oz 确定 系统 组 件 。 

绘制 一 份 应 用 程序 结构 示意 图 。 如 果 可 能 ,从 现 有 文档 中 提取 一 份 示意 图 。 如 果 要 测试 
的 应 用 程序 是 一 个 较 大 的 网 络 系统 的 一 部 分 ,应 该 确定 要 测试 的 系统 组 件 。 确 保 该 示意 图 包 
括 了 所 有 的 系统 组 件 ,例如 客户 端 . 网 络 .中 间 件 和 服务 器 等 。 

如 图 9-18 所 示 为 一 个 银行 系统 的 构架 图 ,描述 了 一 个 集中 式 银行 系统 的 架构 。 客 户 可 以 
通过 授权 网 点 .ATM 终端 等 通过 网 络 和 系统 的 主机 进行 交互 ,该 图 很 清楚 地 说 明了 系统 的 各 
组 件 。 


中 心机 房 


授权 网 点 2 
到 过 ， 
授权 网 点 授权 网 点 


r------- 一 


和 触摸屏 IC 卡 读 写 器 触摸 屏 IC 卡 读 写 器 
图 9-18 一 个 银行 系统 的 构架 图 


@ 描述 系统 配置 。 


增加 更 多 详细 信息 以 完善 示意 图 。 描 述 各 系统 组 件 的 配置 ,应当 掌 握 以 下 信息 : 


连接 到 系统 的 用 户 数 ; 


应 用 程序 客户 端 计算 机 的 配置 情况 (硬件 内存、 操作 系统 、 软 件 、 开 发 工具 等 ); 

使 用 的 数据 库 和 Web 服务 器 的 类 型 (硬件 .数据库 类 型 操作 系统 、 文 件 服务 器 等 ); 
服务 器 与 应 用 程序 客户 端 之 间 的 通信 方式 ; 

前 端 客户 端 与 后 端 服务 器 之 间 的 中 间 件 配置 和 应 用 程序 服务 器 ; 

可 能 影响 响应 时 间 的 其 他 网 络 组 件 ( 调 制 解 调 器 等 ); 

通信 设备 的 吞吐 量 以 及 每 个 设备 可 以 处 理 的 并 发 用 户 数 ; 

客户 端 可 能 是 软件 系统 的 界面 ,也 可 能 是 硬件 设备 。 


例如 ,在 图 9-18 中 ,多 个 不 同类 型 的 客户 端 均 能 访问 系统 。 银 行 数据 库 主机 配置 如 


表 9-3。 


表 9-3 一 个 银行 系统 的 主机 配置 


银行 数据 主机 配置 


连接 到 服务 器 的 客户 端 数 量 


5000 个 并 发 


标 配 4 个 Xeon MP X7460.6 核 处 理 器 


主 频 2660MHz 


操作 系统 


AIX 5L 


DB2 


16GB 


584GB 


@ 分 析 使 用 模型 。 

定义 系统 的 典型 使 用 方式 ,并 确定 需要 重点 测试 的 功能 。 考 虑 哪些 用 户 使 用 系统 、 每 种 类 
型 用 户 的 数量 ,以 及 每 个 用 户 的 典型 任务 。 此 外 ,还 应 考虑 任何 可 能 影响 系统 响应 时 间 的 后 台 
负载 。 例 如 ,假设 平均 每 天 有 5000 个 用 户 通过 电话 银行 系统 做 交易 ,瞬时 的 并 发 交易 高 峰 数 
为 100 ,同时 该 系统 有 固定 的 后 台 负 载 : 80 名 内 部 用 户 执行 各 种 数据 库 统 计 等 相关 事务 。 可 
以 创建 一 个 5000 个 虚拟 用 户 访 问 电话 银行 系统 做 交易 的 方案 ,并 检测 服务 器 的 响应 时 间 。 要 
了 解 后 台 负 载 对 响应 时 间 的 影响 ,可 以 在 运行 方案 中 再 模拟 80 名 内 部 员工 执行 各 种 数据 库 统 
计 等 相关 事务 的 负载 。 

除 定义 常规 用 户 任务 外 ,还 应 该 查看 这 些 任务 的 分 布 情况 。 例 如 ,假设 银行 用 户 使 用 一 个 
中 央 数 据 库 为 跨越 多 个 省 和 时 区 的 客户 提供 服务 。250 个 应 用 程序 客户 端 分 布 在 两 个 不 同 的 
时 区 ,全 都 连接 到 同一 个 Web 服务 器 中 。 其 中 150 个 在 上 海 ,另外 100 个 在 纽约 。 每 个 客户 
端 从 上 午 9 点 开始 工作 ,但 由 于 处 于 不 同 的 时 区 ,因此 在 任何 特定 时 间 内 都 不 会 有 超过 150 个 
的 用 户 同时 登录 。 可 以 分 析 任务 分 布 ,以 确定 数据 库 活动 峰值 期 的 发 生 时 间 ,以 及 负载 峰值 期 
间 的 典型 活动 。 

(2) 定义 测试 目标 。 

开始 测试 之 前 ,应 准确 地 定义 想 要 实现 的 目标 。 

@ 制定 可 以 度量 的 目标 。 

确定 了 负载 测试 的 一 般 性 目标 后 ,应 该 以 可 度量 指标 制定 更 具 针 对 性 的 目标 。 为 了 提供 
评估 基准 ,应 精确 地 确定 、 区 分 可 接受 和 不 可 接受 测试 结果 的 标准 。 


例如 : 
。 一 般 性 目标 产品 评估 : 选择 Web 服务 器 的 硬件 。 
明确 目标 产品 评估 : 在 一 台 HP 服务 器 和 一 台 NEC 服务 器 上 运行 同一 个 包含 300 个 
虚拟 用 户 的 组 。 当 300 个 用 户 同时 浏览 Web 应 用 程序 页 面 时 ,确定 哪 一 种 硬件 提供 
更 短 的 响应 时 间 。 
测试 目标 : 
度量 最 终 用 户 的 响应 时 间 ,完成 一 个 业务 流程 需要 多 长 时 间 ; 
定义 最 优 的 硬件 配置 . 哪 一 种 硬件 配置 可 以 提供 最 佳 性 能 ; 
检查 可 靠 性 ,系统 无 错误 或 无 故障 运行 的 时 间 长 度 或 难度 ; 
查看 硬件 或 软件 升级 对 性 能 或 可 靠 性 有 何 影响 ; 
评估 新 产品 ,应 选择 哪些 服务 器 硬件 或 软件 ; 
度量 系统 容量 ,在 没有 显著 性 能 下 降 的 前 提 下 ,系统 能 够 处 理 多 大 的 负载 ; 
@ 确定 瓶 颈 ,哪些 因素 会 延长 响应 时 间 。 
@ 确定 测试 的 时 间 。 
负载 测试 应 贯穿 于 产品 的 整个 生命 周期 。 
(3) 计划 方案 实施 。 
下 一 步 是 确定 如 何 实现 测试 目标 。 
@ 定义 性 能 度量 的 范围 。 
可 以 度量 应 用 程序 中 不 同 点 的 响应 时 间 。 根 据 测 试 目 标 来 确定 运行 Vuser( 虚 拟 用 户 ) 数 
量 以 及 运行 哪些 Vuser。 这 些 度量 范围 包括 : 
。 度量 端 到 端的 响应 时 间 。 
可 以 在 前 端 运行 GUI Vuser( 图 形 用 户 界面 用 户 ) 或 RTE Vuser( 终 端 用 户 ) 来 度量 典 
型 用 户 的 响应 时 间 。GUI Vuser 可 以 将 输入 提交 给 客户 端 应 用 程序 并 从 该 应 用 程序 
接收 输出 ,以 模拟 实际 用 户 ; RTE Vuser 则 向 基于 字符 的 应 用 程序 提交 输入 ,并 从 该 
应 用 程序 接收 输出 ,以 模拟 实际 用 户 。 
可 以 在 前 端 运行 GUI 或 RTE Vuser 来 度量 跨越 整个 网 络 ( 包 括 终 端 仿真 器 或 GUI 前 
端 、 网 络 和 服务 器 ) 的 响应 时 间 。 
。 度量 网 络 和 服务 器 响应 时 间 。 
可 以 通过 在 客户 端 运行 Vuser( 非 GUI 或 RTE Vuser) 来 度量 网 络 和 服务 器 的 响应 时 
间 ( 不 包括 GUI 前 端的 响应 时 间 )。Vuser 模拟 客户 端 对 服务 器 的 进程 调用 ,但 不 包括 
用 户 界 面部 分 。 在 客户 端 运行 大 量 Vuser 时 ,可 以 度量 负载 对 网 络 和 服务 器 响应 时 间 
的 影响 。 
度量 GUI 响应 时 间 。 
可 以 通过 减 去 前 两 个 度量 值 来 确定 客户 端 应 用 程序 界面 对 响应 时 间 的 影响 。 响 应 时 
间 王 端 到 端 响应 时 间 一 网 络 和 服务 器 响应 时 间 。 
度量 服务 器 响应 时 间 。 
可 以 度量 服务 器 响应 请 求 ( 不 跨越 整个 网 络 ) 所 花费 的 时 间 。 通 过 在 与 服务 器 相连 的 
计算 机 上 运行 Vuser, 可 以 度量 服务 器 性 能 。 
度量 中 间 件 到 服务 器 的 响应 时 间 。 
如 果 可 以 访问 中 间 件 及 其 API, 便 可 以 度量 服务 器 到 中 间 件 的 响应 时 间 。 可 以 通过 中 


间 件 API 创建 Vuser 来 度量 中 间 件 到 服务 器 的 性 能 。 

@ 定义 Vuser 活动 。 

根据 对 Vuser 类 型 的 分 析 以 及 它们 的 典型 任务 和 测试 目标 来 创建 Vuser 脚本 。Vuser 模 
拟 典 型 最 终 用 户 的 操作 ,因此 Vuser 脚本 应 包括 典型 的 最 终 用 户 任务 。 例 如 ,要 模拟 联机 银 
行 客户 端 , 应 该 创建 一 个 执行 典型 银行 任务 的 Vuser 脚本 。 需 要 浏览 经 常 访问 的 页 面 ,以 转 
移 现金 或 支票 余额 。 根 据 测 试 目 标 确定 要 衡量 的 任务 ,并 定义 这 些 任 务 的 事务 。 用 这 些 事务 
度量 服务 器 响应 Vuser 提交 的 任务 所 花费 的 时 间 ( 端 到 端 时 间 )。 例 如 ,要 查看 提供 账户 余额 
查询 的 银行 Web 服务 器 的 响应 时 间 , 则 应 在 Vuser 脚本 中 为 该 任务 定义 一 个 事务 。 此 外 ,可 
以 通过 在 脚本 中 使 用 集合 点 来 模拟 峰值 期 活动 。 集 合 点 指示 多 个 Vuser 在 同一 时 刻 执行 任 
务 。 例 如 ,可 以 定义 一 个 集合 点 ,以 模拟 200 个 用 户 同时 更 新 账户 信息 的 情况 。 

@ 选择 Vuser。 

确定 用 于 测试 的 硬件 配置 之 前 ,应 该 先 确定 需要 的 Vuser 的 数量 和 类 型 。 要 确定 运行 多 
少 个 Vuser 和 哪些 类 型 的 Vuser, 必 须 综合 考虑 测试 目标 来 查看 典型 的 使 用 模型 。 下 面 是 一 
些 一 般 性 规则 : 

。 使 用 一 个 或 几 个 GUI 用户 模拟 每 一 种 类 型 的 典型 用 户 连接 ; 

。 使 用 RTE Vuser 模拟 终端 用 户 ; 

。 运行 多 个 非 GUI 或 非 RTE Vuser 来 生成 每 个 用 户 类 型 的 其 余 负 载 。 

例如 ,假设 有 5 种 类 型 的 用 户 ,每 种 用 户 执行 一 个 不 同 的 业务 流程 ,如 表 9-4 所 示 。 


表 9-4 Vuser 的 数量 和 类 型 


使 用 模型 GUI RTE(Remote Terminal Emulation) 其 他 
100 个 客户 服务 用 户 在 纽约 (LAN 连接 ) 2 一 98 
30 个 客户 在 欧洲 (ISDN 拨号 连接 ) 2 一 28 
5 个 后 台 批 处 理 进程 过 一 5 
150 个 客户 (终端 连接 ) = 150 一 
6 名 管理 人 员 ( 两 个 用 户 使 用 486 PC,4 个 用 | 1(486PC) 和 
户 使 用 586PC) 1(586PC) 


@ 选择 测试 硬件 和 软件 。 

硬件 和 软件 应 该 具有 强大 的 性 能 和 足够 快 的 运行 速度 以 模拟 所 需 数量 的 虚拟 用 户 。 在 确 
定 计算 机 的 数量 和 正确 的 配置 时 ,请 考虑 以 下 事项 : 

。 建议 在 一 台 单 独 的 计算 机 上 运行 测试 工具 主 控 台 。 

。 在 一 台 Windows 计算 机 上 只 能 运行 一 个 GUI Vuser, 而 在 一 台 UNIX 计算 机 上 则 可 

以 运行 几 个 GUI Vuser。 

。 GUI Vuser 测试 计算 机 的 配置 应 该 尽量 与 实际 用 户 的 计算 机 配置 相同 。 

(4) 分 析 测 试 目标 。 

测试 计划 应 该 基于 明确 定义 的 测试 目标 。 下 面 概述 了 常规 的 测试 目标 。 

Q@ 对 用 户 最 终 响 应 时 间 进 行 度量 。 

查看 用 户 执行 业务 流程 以 及 从 服务 器 得 到 响应 所 花费 的 时 间 。 例 如 ,假设 想 要 检测 系统 
在 正常 的 负载 情况 下 运行 时 ,最 终 用 户 能 和 否 在 20s 内 得 到 所 有 请 求 的 响应 。 


高 级 软件 测试 技术 _ 

@ 考虑 最 优 的 硬件 配置 。 

检测 各 项 系统 配置 (内 存 .CPU、 速 度 、 缓 存 、 适 配器 .调制解调器 ) 对 性 能 的 影响 。 了 解 系 
统 体系 结构 并 测试 了 应 用 程序 响应 时 间 后 ,可 以 度量 不 同系 统 配置 下 的 应 用 程序 响应 时 间 , 从 
而 确定 哪 一 种 设置 能 够 提供 理想 的 性 能 级 别 。 例 如 ,可 以 设置 三 种 不 同 的 服务 器 配置 ,并 针对 
各 个 配置 运行 相同 的 测试 ,以 确定 性 能 上 的 差异 。 

。 配置 1: 1GHz,1GB RAM。 

。 配置 2: 2GHz、2GB RAM。 

。 配置 3: 3GHz.3GB RAM。 

@ 可 靠 性 检查 。 

确定 系统 在 连续 的 高 工作 负载 下 的 稳定 性 级 别 。 可 以 创建 系统 负载 : 强制 系统 在 短 时 间 
内 处 理 大 量 任务 来 模拟 系统 在 数 周 或 数 月 的 时 间 内 通常 会 遇 到 的 活动 类 型 。 

@ 硬件 或 软件 升级 检查 。 

执行 回归 测试 ,以 便 对 新 旧版 本 的 硬件 或 软件 进行 比较 。 可 以 查看 软件 或 硬件 升级 对 响 
应 时 间 ( 基 准 ) 和 可 靠 性 的 影响 。 应 用 程序 回归 测试 需要 查看 新 版 本 的 效率 和 可 靠 性 是 否 与 旧 
版 本 相同 。 

回 新 产品 评测 。 

可 以 运行 测试 ,以 评估 单个 产品 和 子 系统 在 产品 生命 周期 中 的 计划 阶段 和 设计 阶段 的 表 
现 。 例 如 ,可 以 根据 评估 测试 来 选择 服务 器 的 硬件 或 数据 库 套件 。 

@ 找 出 瓶颈 所 在 。 

可 以 运行 测试 以 确定 系统 的 瓶颈 ,并 确定 哪些 因素 导致 性 能 下 降 , 例 如 文件 锁定 ,资源 争 
用 和 网 络 过 载 。 使 用 负载 压力 测试 工具 ,以 及 网 络 和 计算 机 监视 工具 以 生成 负载 ,并 度量 系统 
中 不 同 点 的 性 能 。 如 图 9-19 所 示 为 某 系 统 的 吞吐 量 示意 图 。 
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9-19 ”菜系 统 的 吞吐 量 示 意图 (来 自 Nmon 软件 ) 


@ 系统 容量 的 度量 。 
度量 系统 容量 ,并 确定 系统 在 不 降低 性 能 的 前 提 下 能 提供 多 少 额外 容量 。 要 查看 容量 ,可 


以 查看 现 有 系统 中 性 能 与 负载 间 的 关系 ,并 确定 出 现 响 应 时 间 显著 延长 的 位 置 。 该 处 通常 称 
为 响应 时 间 曲 线 的 “拐点 ”。 确 定 了 当前 容量 后 , 便 可 以 确定 是 否 需 要 增加 资源 以 支持 额外 的 
用 户 。 图 9-20 所 示 为 某 系统 平均 事件 响应 时 间 示 意图 。 
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图 9-20 某 系 统 平均 事件 响应 时 间 示 意图 (来 自 Nmon 软件 ) 


2) 测试 分 析 

负载 压力 测试 需求 分 析 既 需要 借助 于 相关 的 理论 知识 ,又 要 依靠 测试 工程 师 在 相关 领域 
的 经 验 积累 ,下 面 分 别 介绍 一 些 理论 知识 及 经 验方 法 。 

(1) 测试 需求 分 析 。 

测试 需求 是 应 用 需求 的 衍生 ,而 且 测试 用 例 也 必须 覆盖 所 有 的 需求 ,否则 这 个 测试 过 程 就 
是 不 完整 的 。 主 要 有 以 下 几 个 关键 点 : 

。 测试 的 对 象 是 什么 ,例如 “被 测 系 统 中 有 负载 压力 需求 的 功能 点 包括 哪些 ”,“ 测 试 中 需 
要 模拟 哪些 部 门 用 户 产生 的 负载 压力 ”等 问题 。 
系统 配置 如 何 , 例 如 “预计 有 和 多少 用 户 并 发 访问 ”,“ 用 户 客户 端的 配置 如 何 ”,“ 使 用 什 
么 样 的 数据 库 ”“ 服 务 器 怎样 和 客户 端 通信 ”,“ 网 络 设备 的 吞吐 能 力 如何 , 每 个 环节 承 
受 多 少 并 发 用 户 ” 等 问题 。 
应 用 系统 的 使 用 模式 是 什么 ,例如 “使 用 在 什么 时 间 达 到 高 峰 期 ",“ 用 户 使 用 该 系统 是 
采用 B/S 运行 模式 吗 ? 等 问题 。 

可 以 针对 用 户 提出 的 问题 ,做 一 个 简单 的 需求 回答 ,如 表 9-5 所 示 。 

(2) 负载 压力 测试 需求 分 析 原 理 。 

这 里 介绍 用 80 一 20 原则 测试 强度 估算 。80 一 20 原则 : 每 个 工作 日 中 80% 的 业务 在 20% 
的 时 间 内 完成 。 例 如 ,每 年 业务 量 集中 在 8 个 月 ,每 个 月 20 个 工作 日 ,每 个 工作 日 8 小 时 , 即 
每 天 80% 的 业务 在 1. 6h 完成 。 举 一 个 例子 来 看 80 一 20 原则 如 何 应 用 于 测试 需求 分 析 。 

去 年 全 年 处 理 业务 约 100 万 笔 ,其 中 15% 的 业务 处 理 中 ,每 笔 业务 需 对 应 用 服务 器 提交 
7 次 请 求 ; 70% 的 业务 处 理 中 ,每 笔 业务 需 对 应 用 服务 器 提交 5 次 请 求 ; 其 余 15% 的 业务 处 理 


表 9-5 用 户 需求 与 测试 目标 举例 


测试 目标 用 户 需 求 
测量 对 最 终 用 户 的 响应 时 间 要 花 多 少时 间 做 完 一 笔 交易 
确定 最 优 硬 件 配 置 什么 样 的 配置 提供 了 最 好 的 性 能 
检查 可 靠 性 系统 在 无 错 情况 下 能 承担 多 大 及 多 长 时 间 的 负载 
检查 软 、 硬 件 升 级 这 些 升 级 对 系统 性 能 影响 有 多 大 
评估 新 产品 服务 器 应 该 选择 哪些 硬件 与 软件 
测试 系统 负载 在 没有 较 大 性 能 衰减 的 前 提 下 ,系统 能 够 承受 多 大 负载 
分 析 系 统 瓶颈 哪些 因素 降低 了 交易 响应 时 间 


中 ,每 笔 业务 需 对 应 用 服务 器 提交 3 次 请 求 。 根 据 以 往 的 统计 结果 ,每 年 的 业务 增 量 为 15%， 
考虑 到 今后 3 年 业务 发 展 的 需要 ,测试 需 按 现 有 业务 量 的 两 倍 进行 。 测 试 强度 估算 如 下 : 

每 年 总 的 请 求 数 为 : (100 X15%X7 十 100X70%X5 十 100X15% X3)X2 万 次 /年 = 
1000 万 次 /年 ; 

每 天 请 求 数 为 1000/160 万 次 /天 ==6. 25 万 次 /天 ; 

每 秒 请 求 数 为 : (62 500 X80%)/(8X20% X3600) 次 /s 二 8. 68 次 /s, 即 服务 器 处 理 请 求 
的 能 力 应 达到 9 次 /s。 

3) 测试 用 例 设计 

测试 用 例 设计 一 般 涉 及 测试 环境 ,测试 内 容 , 最 后 形成 测试 用 例 。 在 测试 用 例 设计 时 首先 
要 对 比 测试 环境 和 真实 业务 的 测试 环境 ,真实 业务 操作 环境 又 可 能 涉及 各 种 网 络 环境 和 机 房 
测试 环境 等 ,在 测试 环境 方案 确定 后 再 考虑 测试 的 内 容 , 测 试 内容 一 般 包 括 并 发 性 能 测试 . 疲 
劳 强度 测试 .大 数据 量 测试 和 系统 资源 监控 等 。 例 如 ,在 对 全 国联 网 的 婚姻 登记 系统 的 结婚 登 
记功 能 进行 测试 时 ,首先 要 考虑 测试 所 处 的 环境 ,在 这 种 测试 环境 下 进行 分 析 , 而 后 再 设计 对 
结婚 登记 功能 做 负载 压力 测试 的 测试 用 例 。 表 9-6 是 基于 局 域 网 的 测试 用 例 列表 。 


表 9-6 基于 局 域 网 的 测试 用 例 列表 


用 例 名 称 pe ee 数 据 量 备注 说 明 
抽 朗 | 信 息 上 传 | 50.lo iid 只 上 传 信息 ,不 带 附件 
nn 
项 目 管理 | 50.100 | Modem ee tb ede 
ee 


4) 测试 环境 、 工 具 、 测 试 数据 准备 
(1) 测试 环境 准备 。 


测试 环境 直接 影响 测试 效果 ,所 有 的 测试 结果 都 是 在 一 定 软 硬件 及 网 络 的 环境 约束 下 的 


结果 ,测试 环境 不 同 ,测试 结果 可 能 会 有 所 不 同 ,特别 是 对 于 负载 压力 测试 更 是 如 此 ,因为 压力 
负载 测试 结果 往往 是 一 组 和 时 间 有 关 的 值 , 因 此 对 负载 压力 测试 环境 的 准备 就 显得 特别 的 
重要 。 


a 测试 环境 的 基本 原则 。 

。 模拟 真实 环境 ,也 可 以 首先 满足 软件 运行 的 最 低 要 求 ,而 后 逐渐 选择 要 部 署 的 真实 

环境 ; 

。 选用 与 被 测 系统 相 一 致 的 主机 、 操 作 系统 和 软件 平台 ; 

。 营造 相对 独立 的 测试 环境 ; 

。 无 毒 的 环境 。 

@ 负载 压力 测试 的 测试 环境 。 

负载 压力 测试 环境 准备 过 程 中 可 以 参考 测试 环境 的 基本 准则 ,但 是 又 要 考虑 负载 压力 测 
试 的 特殊 性 和 负载 压力 测试 目的 。 负 载 压 力 测试 一 般 强 调 “ 真 实 ” 应 用 环境 下 的 性 能 表现 ,从 
而 实现 性 能 评估 、 故 障 定位 以 及 性 能 优化 的 目的 ,因此 进行 负载 压力 测试 环境 的 准备 时 要 注意 
以 下 几 点 : 

。 如 果 是 完全 真实 的 应 用 运行 环境 ,要 尽 可 能 降低 测试 对 业务 的 影响 ; 

如 果 是 建立 近似 的 真实 环境 ,要 首先 达到 服务 器 、 数 据 库 以 及 中 间 件 的 真实 ,并 且 要 具 
备 一 定 的 数据 量 , 客 户 端 可 以 次 要 考虑 ; 

必须 考虑 测试 工具 的 硬件 和 软件 配置 要 求 ; 

配置 与 业务 相关 联 的 测试 环境 需求 匹配 ; 

测试 环境 中 应 包括 对 交互 操作 的 支持 ; 

测试 环境 中 应 该 包括 安装 、 备 份 及 恢复 过 程 。 

@ 测试 环境 配置 。 

。 操作 系统 的 版 本 (包括 各 种 服务 .安装 及 修改 补丁 ); 

。 网 络 软件 的 版 本 ; 

。 传输 协议 ; 

。 服务 器 及 工作 站 机 器 ; 

。 测试 工具 配置 。 

@ 合适 的 测试 环境 标准 。 

。 满足 测试 执行 的 技术 要 求 ; 

。 确保 测试 的 结果 是 稳定 的 、 可 重复 的 和 正确 的 。 

大 多 数 情况 下 强调 真实 环境 下 检测 系统 性 能 ,在 实施 过 程 中 大 家 认为 这 样 做 会 遇 到 很 多 
阻力 ,比如 真实 环境 下 不 允许 负载 压力 测试 为 系统 带 来 大 量 的 垃圾 数据 ; 测试 数据 与 真实 业 
务 数据 混在 一 起 无 法 控制 测试 结果 ; 负载 压力 测试 如 果 使 服务 器 宕 机 ,会 给 系统 带 来 巨大 损 
失 等 。 那 么 应 该 如 何 理 解 “真实 环境 下 检测 系统 性 能 ” 呢 ? 

在 负载 压力 测试 中 强调 的 “真实 环境 ”是 指 后 台 服 务 器 与 客户 端 应 用 要 与 实际 真实 应 用 环 
境 保持 一 致 ,同时 ,这 里 也 包括 了 与 业务 有 关 的 软 硬 件 配置 环境 和 数据 量 环境 等 。 可 以 看 出 我 
们 将 网 络 环境 排除 在 外 ,原因 是 网 络 环境 缓解 了 客户 端 对 服务 器 所 造成 的 并 发 负载 压力 ,网络 
规模 越 大 、 网 络 类 型 越 多 、 网 络 拓扑 越 复杂 、 网 络 流量 越 纷繁 交织 ,对 客户 端的 并 发 负载 压力 组 
解 程度 越 大 。 

(2) 测试 工具 准备 。 

这 里 主要 讨论 如 何 选择 测试 工具 。 

g@ 负载 压力 测试 工具 选择 。 

进行 负载 压力 测试 首先 应 该 选择 一 个 合适 的 测试 工具 ,一 个 测试 工具 能 否 满足 测试 需求 、 


能 否 达 到 令 人 满意 的 测试 结果 是 选择 测试 工具 要 考虑 的 最 基本 问题 。 更 进一步 ,可 以 考虑 一 
些 细节 问题 ,比如 该 工具 对 于 处 理 扩展 的 交互 (例如 一 个 请 求 取决 于 上 一 个 请 求 的 结果 ) 如 何 ; 
对 于 处 理 Cookies(Cookies 对 于 许多 面向 会 话 的 J2EE 系统 是 必 不 可 少 的 ) 如 何 ; 如 果 J2EE 
应 用 程序 客户 端 需要 处 理 一 些 JavaScript, 以 进入 下 一 次 通信 会 如 何 处 理 ; 在 收集 了 响应 时 间 
数据 后 ,如 何 对 它 进行 分 析 ; 对 CPU 时 间 、 网 络 使 用 、 堆 大 小 、 分 页 活动 或 者 数据 库 活动 如 何 
监控 等 都 是 选择 一 个 测试 工具 需要 考虑 的 具体 问题 。 一 些 高 端 工 具 与 一 般 性 的 工具 往往 在 一 
些 细 节 、 适 用 范围 以 及 易 用 性 方面 存在 差别 。 比 如 ,顶级 的 负载 测试 工具 可 以 模拟 多 个 浏览 
器 ,与 大 多 数 应 用 服务 器 集成 ,收集 多 个 服务 器 主机 的 性 能 数据 (包括 操作 系统 JVM 和 数据 
库 统计 数据 ), 可 以 生成 在 以 后 使 用 高 级 的 分 析 工 具 进 行 分 析 的 数据 集 。 

当然 ,测试 工具 的 选择 首先 应 该 看 是 否 能 够 满足 基本 测试 需求 ,该 工具 必须 可 以 模拟 应 用 
程序 客户 端 ,如 果 应 用 程序 使 用 一 些 不 常见 的 浏览 器 功能 组 合 或 者 其 他 非 标准 客户 端 技术 , 那 
么 就 排除 了 相当 一 部 分 候选 者 。 具 备 了 基本 功能 后 ,可 以 考虑 工具 的 生产 率 。 一 般 来 说 ,包含 
的 分 析 工 具 越 多 ,可 以 记录 的 性 能 数据 类 型 越 多 ,可 以 达到 的 生产 率 就 越 高 ,价格 也 就 越 高 。 
不 过 有 些 低 端 负载 测试 程序 是 免费 的 ,在 预算 有 限 的 情况 下 ,免费 ”的 意义 是 不 言 而 明 的 。 有 具 
体 来 说 ,在 选择 测试 工具 时 可 以 考虑 以 下 几 点 : 
模拟 客户 端 。 首 要 要 求 是 负载 测试 程序 能 够 处 理应 用 程序 所 使 用 的 功能 和 协议 。 
运行 多 个 模拟 的 客户 端 。 这 是 负载 测试 程序 最 基本 、 且 最 重要 的 功能 ,有 助 于 确定 哪 
些 是 负载 测试 程序 以 及 哪些 不 是 。 
脚本 化 执行 并 能 编辑 脚本 。 如 果 不 能 编辑 客户 端 与 服务 器 之 间 交 互 的 脚本 ,那么 就 不 
能 处 理 除 最 简单 的 客户 端 之 外 的 任何 东西 。 编 辑 脚本 的 能 力 是 最 基本 的 , 且 小 的 改变 
不 应 该 要 求 重新 生成 脚本 。 
支持 会 话 。 如 果 不 支持 会 话 或 者 Cookies ,就 不 算是 真正 的 负载 压力 测试 工具 ,并 且 不 
能 对 大 多 数 J2EE 应 用 程序 进行 负载 测试 。 
可 配置 的 用 户 数量 。 测 试 程序 应 该 可 以 让 你 指定 每 个 脚本 由 多 少 个 模拟 用 户 运行 , 包 
括 让 你 随时 间 改 变 模拟 用 户 的 数量 ,因为 许多 负载 测试 可 以 做 到 从 小 的 用 户 数量 开 
始 , 并 慢 慢 增加 到 更 多 的 用 户 数量 。 
报告 成 功 、 错 误 和 失败 。 每 一 个 脚本 都 必须 定义 一 个 方法 来 识别 成 功 的 交互 以 及 失败 
和 错误 模式 (错误 一 般 不 会 有 页 面 返回 ,而 失败 可 能 在 页 面 上 得 到 错误 的 数据 ) 。 
页 面 显示 。 如 果 测 试 工具 可 以 检查 一 些 发 送 给 模拟 用 户 的 页 面 , 这 会 很 有 用 ,这 样 可 
以 做 到 心中 有 数 ,以 确保 测试 工作 是 正确 进行 的 。 
导出 结果 。 可 以 用 不 同 的 工具 来 分 析 测 试 结果 ,这 些 工 具 包 括 电 子 表格 和 可 以 处 理 数 
据 的 自 定义 脚本 。 虽 然 许多 负载 测试 工具 包括 大 量 的 分 析 功 能 ,但 是 导出 数据 的 能 力 
使 用 户 在 以 任意 的 方式 分 析 和 编辑 数据 方面 具有 更 大 的 灵活 性 。 
考虑 时 间 。 真 实 世 界 的 用 户 不 会 在 收 到 一 页 后 立即 请 求 另 一 页 ,一般 在 查看 一 页 和 下 
一 页 之 间 会 有 延迟 。 考 虑 时 间 这 个 标准 术语 表示 在 脚本 中 加 入 延迟 以 更 真实 地 模拟 
用 户 行为 。 大 多 数 负载 测试 程序 支持 根据 统计 分 布 随机 生成 考虑 时 间 。 
客户 端 从 列表 中 选择 数据 。 用 户 一 般 不 会 使 用 同样 的 一 组 数据 ,每 位 用 户 通常 与 服 
务 器 进行 不 同 的 交互 。 模 拟 用 户 也 应 该 这 样 做 ,如 果 在 交互 的 关键 点 ,脚本 可 以 从 
一 组 数据 中 选择 数据 , 则 可 以 更 容易 地 让 你 的 模拟 用 户 表现 出 使 用 不 同 数据 的 
行为 。 


从 手工 执行 的 会 话 记 录 脚 本 。 相 对 于 编写 脚本 ,用 浏览 器 手工 运行 会 话 并 记录 这 个 会 
话 , 然 后 再 编辑 会 容易 得 多 。 
JavaScript。 一 些 应 用 程序 大 量 使 用 JavaScript 并 且 需 要 模拟 客户 端 支持 它 。 不 过 ,使 
用 客户 端 JavaScript 可 能 会 增加 对 测试 系统 上 系统 资源 的 需求 。 
分 析 工 具 。 得 到 测试 数据 只 是 成 功 的 一 半 , 另 一 半 是 分 析 性 能 数据 。 因 此 测试 工具 提 
供 的 分 析 工具 越 多 ,就 越 有 利于 从 不 同 的 方面 进行 数据 分 析 。 
测量 服务 器 端 统 计数 字 。 基 本 负载 压力 测试 工具 测量 客户 端 / 服 务 器 交互 中 基于 客户 
端的 响应 时 间 。 如 果 同 时 收集 其 他 统计 数据 (如 CPU 使 用 情况 和 页 面 错误 率 ) 就 更 好 
了 ,有 了 这 些 数 据 , 就 可 以 进一步 做 一 些 有 用 的 工作 ,如 查看 服务 器 负载 上 下 文中 的 客 
户 端 响应 时 间 和 吞吐 量 统计 。 

@ 负载 压力 测试 工具 的 局 限 性 。 

任何 负载 压力 测试 工具 都 不 是 完美 无 缺 的 ,在 实际 使 用 中 经 常 碰 到 一 些 问 题 ,概括 起 来 主 
要 有 以 下 几 点 : 

。 缺乏 功能 点 的 校 验 ; 

。 对 有 些 控 件 支持 得 不 好 ; 

。 不 能 达到 真实 模拟 负载 ; 

。 脚本 的 支持 不 够 灵活 ; 

。 报错 定位 不 够 详细 。 

在 实际 压力 测试 过 程 中 ,通常 使 用 多 种 工具 达到 测试 目的 ,如 何 使 多 种 工具 很 好 地 配合 并 
能 达到 最 好 的 “性 能 价格 比 ”? 测试 工程 师 要 发 挥 最 大 的 主观 能 动 性 。 

(3) 测试 协议 选择 。 

“协议 ”这 个 概念 我 们 并 不 陌生 ,测试 工具 中 的 协议 指 的 是 工具 提供 给 我 们 的 测试 接口 ,也 
可 以 理解 为 测试 类 型 。LoadRunner 提供 的 测试 协议 比较 全 面 ,例如 : 

， 应 用 程序 解决 方案 : Citrix。 

» Client/Server: MS SQL ODBC,Oracle(2-tier) .DB2 CLI、 Sybase Ctlib .Sybase Dblib、 

Windows Sockets 及 DNS。 

。 定制 : C templates、Visual Basic templates ,Java templates、JavaScript 及 VBScript。 

。 分布 式 组 件 : COM/DCOM、Corba-Java 及 Rmi-Java。 

*。 E-business: FTP, LDAP, Palm, SOAP, Web (HTTP/HTML) 及 the dual Web/ 
Winsocket。 


Enterprise Java Beans: EJB Testing 及 Rmi-Java。 

。 ERP/CRM: Baan, Ora, cle NCA、Peoples&t Tuxedo 、Peoplesoft & Web multilingual、 
SAPGUI、SAP-Web 、Siebel (Siebel-DB2CLI, Siebel-MSSQL, Siebel-Web 及 Siebel- 
Oracle) 。 

。 Legacy: Terminal Emulation(RTE) 。 

Mailing Services: Internet Messaging (IJIMAP)、MS Exchange(MAPI)、POP3 及 

SMTP。 

。 Middleware: Jacada 及 Tuxedo。 

Streaming: MediaPlayer 及 RealPlayer。 

Wireless: i-Mode,VoiceXML 及 WAP。 


这 里 要 重点 讨论 的 问题 是 选择 测试 协议 的 策略 。 一 个 原则 性 的 观点 是 “客户 端 与 直接 压 
力 承受 的 服务 器 之 间 的 通信 协议 是 选择 测试 协议 的 唯一 标准 ”。 例 如 ,有 的 测试 工程 师 问 “我 
们 的 系统 是 B/S 运行 模式 ,应 该 选择 什么 样 的 测试 协议 来 测 ?”, 我 们 说 这 是 一 个 无 效 的 问题 ， 
为 什么 呢 ? 从 这 个 问题 中 不 能 获取 任何 与 通信 协议 有 关 的 信息 ,B/S 运行 模式 可 以 采用 
HTTP 协议 ,也 可 以 采用 TCP/IP、SMTP 和 FTP 等 协议 ,C/S 运行 模式 也 是 这 个 道理 。 选 择 
不 同 的 协议 决定 了 测试 的 成 功 与 失败 。 再 例如 ,一 个 使 用 非常 普遍 的 系统 : B/S 运行 模式 ,前 
端正 浏览 器 ,IE 浏览 器 直接 与 Web 服务 器 通信 (可 能 多 台 ), Web 服务 器 与 后 台数 据 库 服务 
器 (可 能 多 台 ) 有 数据 交互 操作 ,IE 浏览 器 与 Web 服务 器 的 通信 协议 采用 HTTP, 那 么 , 理 所 
当然 我 们 选择 的 测试 协议 是 HTTP。 再 灵活 一 些 , 如 果 IE 浏览 器 与 Web 服务 器 的 通信 不 仅 
采用 了 HTTP 协议 ,而 且 还 有 部 分 业务 采用 Winsocket, 那 么 必须 选择 Web/Winsocket 双 协 
议 。 更 进一步 ,有 些 系 统 客 户 端 是 C/S 运行 模式 和 B/S 运行 模式 的 混合 ,为 了 达到 测试 目的 ， 
就 要 选择 更 多 的 测试 协议 。 可 喜 的 是 LoadRunner 8. 0 版 本 以 后 已 经 能 够 帮 有 我 们 实现 这 个 愿 
望 了 。 再 来 看 一 种 情况 : 系统 的 架构 是 客户 端 应 用 程序 加 Tuxedo 消息 中 间 件 (或 者 是 其 他 中 
间 件 ) 加 数据 库 服 务 器 。 遇 到 这 种 情况 ,我 们 一 般 会 选择 Tuxedo 测试 协议 ,BEA 公司 的 产品 
Tuxedo 的 市 场 占有 率 给 测试 工具 厂商 带 来 的 压力 显而易见 。 

(4) 测试 数据 准备 。 

实施 负载 压力 测试 时 ,需要 运行 系统 相关 业务 ,这 时 需要 一 些 数 据 支持 才 可 运行 业务 ,这 
部 分 数据 即 为 初始 测试 数据 或 静态 数据 。 例 如 银行 系统 的 利率 ,移动 话费 的 每 分 钟 收费 标准 
等 。 在 初始 的 测试 环境 中 需要 输入 一 些 适当 的 测试 数据 ,这 些 数 据 是 业务 运行 的 基础 ,同时 也 
用 来 验证 测试 用 例 。 在 正式 的 测试 开始 以 前 要 对 测试 用 例 进 行 评审 。 在 测试 进行 到 关键 过 程 
领域 时 ,非常 有 必要 进行 数据 状态 的 备份 。 初 始 数据 意味 着 将 合适 的 数据 存储 下 来 ,需要 的 时 
候 恢复 它 , 初 始 数据 提供 了 一 个 基线 用 来 评估 测试 执行 的 结果 。 

对 系统 实施 负载 压力 测试 的 时 候 ,经 常 需要 准备 大 数据 量 、 实 施 独立 的 测试 ,或 者 与 并 发 
负载 压力 相 结合 的 性 能 测试 ,这 部 分 数据 为 业务 测试 数据 。 例 如 飞机 订 票 系统 查询 订 票 信息 ， 
就 需要 准备 大 量 的 订 票 记录 。 又 比如 测试 并 发 查询 业务 ,那么 要 求 对 应 的 数据 库 和 表 中 有 相 
当 的 数据 量 , 以 及 数据 的 种 类 应 能 覆盖 全 部 业务 。 

在 负载 压力 测试 过 程 中 ,为 了 模拟 不 同 的 虚拟 用 户 的 真实 负载 ,需要 将 一 部 分 业务 数据 参 
数 化 ,这 部 分 数据 为 参数 化 测试 数据 。 例 如 模拟 不 同 用 户 登录 系统 ,就 需要 准备 大 量 用 户 名 及 
相应 密码 参数 数据 。 还 需要 考虑 特殊 系统 需要 的 测试 数据 ,模拟 真实 环境 测试 ,有 些 软件 特别 
是 面向 大 众 的 商品 化 软件 ,在 测试 时 常常 需要 考察 在 真实 环境 中 的 表现 。 如 测试 杀毒 软件 的 
扫描 速度 时 ,硬盘 上 布置 的 不 同类 型 文件 的 比例 要 尽量 接近 真实 环境 ,这 样 测试 出 来 的 数据 才 
有 实际 意义 。 另 外 ,测试 数据 的 准备 可 以 通过 工具 或 者 通过 开发 程序 来 帮助 实现 。 

5) 测试 脚本 开发 与 调试 

测试 脚本 是 指 Vuser 脚本 , 即 虚拟 用 户 回 放 所 使 用 的 脚本 。 脚 本 的 产生 可 以 采用 录制 、 
编写 或 者 录制 加 编写 混合 模式 ,初始 生成 的 脚本 经 过 增强 编辑 之 后 ,必须 再 经 调试 才 可 用 。 

Vuser 脚本 的 结构 和 内 容 因 Vuser 类 型 的 不 同 而 不 同 。 例 如 ,数据 库 Vuser 脚本 总 是 包 
含 三 部 分 ,是 在 一 段 类 似 C 语言 并 且 包 括 对 数据 库 服务 器 的 SQL 调用 的 代码 中 编写 的 。 相 
反 ,GUIVuser 脚本 只 有 一 个 部 分 ,并 且 是 用 TSL( 测 试 脚本 语言 ) 编 写 的 。 以 LoadRunner 为 
例 说 明 开 发 Vuser 脚本 的 过 程 : 录制 基本 的 Vuser 脚本 一 增强 并 编辑 脚本 一 配置 运行 时 设置 
一 以 独立 模式 运行 Vuser 脚本 一 脚本 集成 到 LoadRunner 方案 中 。 首 先 来 了 解 录制 脚本 。 在 


一 般 的 测试 过 程 中 ,录制 脚本 所 占 比例 较 大 ,测试 工具 提供 了 大 量 录制 Vuser 脚本 的 工具 ,并 
且 可 以 通过 将 控制 流 结构 和 其 他 测试 工具 的 API 添加 到 脚本 中 来 增强 该 基本 脚本 。 然 后 是 
配置 运行 时 设置 。 运 行 时 设置 包括 迭代 .日 志和 计时 信息 以 及 定义 Vuser 在 执行 Vuser 脚本 
时 的 行为 。 要 验证 脚本 是 否 能 正确 运行 ,请 以 单独 模式 运行 该 脚本 。 如 果 脚 本 运行 正确 , 则 将 
其 合并 到 方案 中 。 那 么 ,录制 哪些 内 容 呢 ?主要 录制 用 户 在 客户 端 应 用 程序 中 执行 的 典型 业 
务 流程 。 测 试 工具 通过 录制 客户 端 和 服务 器 之 间 的 活动 来 创建 脚本 。 例 如 ,在 数据 库 应 用 程 
序 中 ,测试 工具 的 脚本 生成 器 (VuGen) 会 监控 数据 库 的 客户 端 ,并 跟踪 发 送 到 数据 库 服 务 器 
和 从 数据 库 服 务 器 接收 的 所 有 请 求 。 用 VuGen 创建 的 每 个 Vuser 脚本 都 可 以 通过 执行 对 服 
务 器 API 的 调用 来 直接 与 服务 器 通信 ,而 不 需要 依赖 客户 端 软件 。 这 样 便 可 以 使 用 Vuser 来 
检查 服务 器 性 能 (甚至 在 客户 端 软件 的 用 户 界面 完全 开发 好 之 前 ) 。 

此 外 , 当 Vuser 与 服务 器 直接 通信 时 ,不 需要 在 用 户 界面 中 耗费 系统 资源 。 这 样 就 可 以 
在 一 个 工作 站 中 同时 运行 大 量 Vuser, 进 而 可 以 使 用 很 少 的 测试 计算 机 来 模拟 非常 大 的 服务 
器 负载 。 

测试 工具 都 留 有 手工 编写 脚本 的 人口 ,例如 Cscript、Java script、VB 以 及 汇编 语言 等 ,并 
且 提 供 相应 测试 类 型 的 API, 测 试 人 员 在 此 环境 下 可 以 编程 生成 脚本 。 

脚本 的 调试 也 是 非常 重要 的 工作 ,例如 要 调试 C/S 脚本 ,那么 应 该 注意 些 什么 呢 ? 对 于 
C/S 结构 的 脚本 ,在 数据 量 大 时 ,脚本 非常 庞大 ,如 果 全 部 看 一 遍 , 根 本 是 不 可 能 的 。 对 于 这 种 
脚本 的 调试 ,应 注意 以 下 几 个 方面 : 

(1) 动态 数据 的 处 理 。 

我 们 经 常会 碰 到 某 个 表单 的 编号 是 记录 在 另 一 个 表 中 的 ,程序 通过 查询 这 个 表 , 并 加 1 来 
获取 到 这 个 编号 。 对 于 这 种 问题 ,可 以 分 解 为 以 下 3 步 ( 以 Oracle 数据 库 为 例 ) 。 

OO 获取 数据 ,可 使 用 lrd_ora8_save_col 函数 。 

@ 函数 值 加 1 处 理 , 可 使 用 lr_param_increment 函数 。 

@@ 蔡 换 处 理 , 即 把 Update 中 的 具体 值 蔡 换 为 我 们 获取 并 处 理 好 的 参数 。 

(2) 参数 化 过 程 。 

这 一 过 程 所 关注 的 不 过 是 Insert 及 Update 语句 。 将 这 些 语 句 中 违反 数据 库 约 束 的 地 方 
进行 参数 化 。 而 且 仅 关注 这 些 语句 ,基本 上 就 可 以 搞 清楚 整个 程序 的 处 理 流程 。 理 清关 系 , 作 
参数 时 直接 Replace All( 录 制 脚本 时 注意 使 用 的 数据 最 好 有 特点 ,这 样 蔡 换 过 程 中 就 不 会 把 
不 该 替换 的 也 替换 了 ) 就 可 以 了 。 

6) 测试 场景 设计 

(1) 创建 Vuser 组 。 

方案 由 Vuser 组 构成 ,Vuser 模拟 与 应 用 程序 进行 交互 的 实际 用 户 。 运 行 方 案 时 ,Vuser 
会 在 服务 器 上 生成 负载 ,测试 工具 会 监视 服务 器 和 事务 性 能 。Vuser 组 用 于 将 方案 中 的 
Vuser 组 织 成 可 管理 的 组 。 可 以 创建 包含 具有 共享 或 相似 特征 的 Vuser 的 Vuser 组 。 例 如， 
可 以 为 运行 相同 Vuser 脚本 的 所 有 Vuser 创建 Vuser 组 。 

(2) 配置 Vuser 组 中 的 Vuser。 

可 以 为 定义 的 Vuser 组 中 的 各 个 Vuser 定义 属性 。 对 于 每 个 Vuser, 可 以 分 配 不 同 的 脚 
本 和 负载 生成 器 计算 机 。 

(3) 配置 Vuser 运行 时 的 设置 。 

可 以 设置 脚本 的 运行 时 设置 ,采用 在 控制 中 心 自 定义 执行 Vuser 脚本 的 方式 。 


(4) 配置 负载 生成 器 。 

在 测试 执行 之 前 ,需要 配置 方案 的 负载 生成 器 和 Vuser 行为 , 即 制定 场景 。 虽 然 默认 设 
置 与 大 多 数 环境 对 应 ,但 是 LoadRunner 允许 修改 这 些 设 置 以 便 自 定义 方案 行为 。 这 些 设置 
适用 于 所 有 未 来 的 方案 运行 并 且 通 常 只 需 设 置 一 次 。 这 一 类 设置 适用 于 方案 中 所 有 的 负载 生 
成 器 。 如 果 全 局 方案 设置 与 单个 负载 生成 器 的 设置 不 同 , 则 负载 生成 器 设置 将 蔡 代 它们 。 可 
以 指出 哪些 负载 生成 器 将 在 方案 中 运行 Vuser。 例 如 ,如 果 某 个 负载 生成 器 不 适用 于 特定 方 
案 , 可 以 暂时 排除 此 负载 生成 器 。 如 果 要 隔离 特定 计算 机 以 测试 其 性 能 , 则 禁用 负载 生成 器 相 
当 有 用 。 

可 以 为 各 个 负载 生成 器 配置 附加 设置 。 可 以 配置 的 设置 有 状态 .运行 时 文件 存储 、UNIX 
环境 \ 运 行 时 配额 .Vuser 状态 、Vuser 限制 .连接 日 志 ( 专 家 模式 )、 防 火 墙 和 WAN 仿真 等 。 

(5) 配置 终端 服务 设置 。 

可 以 使 用 终端 服务 管理 器 来 远程 管理 在 终端 服务 器 上 的 、 负 载 测试 方案 中 运行 的 多 个 负 
载 管理 器 。 此 外 ,可 以 使 用 终端 服务 器 克服 只 能 在 基于 Windows 的 负载 生成 器 上 运行 单个 
GUI Vuser 的 局 限 性 。 通 过 为 每 个 GUI Vuser 打开 一 个 终端 服务 器 会 话 , 可 以 在 同一 应 用 程 
序 上 运行 多 个 GUI Vuser。 

使 用 终端 服务 可 以 集中 管理 连接 到 服务 器 的 每 个 客户 端的 计算 资源 ,并 为 每 名 用 户 提 供 
他 们 自己 的 工作 环境 。 使 用 终端 服务 器 客户 端 ,可 以 通过 远程 计算 机 在 基于 服务 器 的 计算 环 
境 中 操作 。 终 端 服务 器 通过 网 络 传送 应 用 程序 ,并 通过 终端 仿真 软件 显示 它们 。 每 个 用 户 会 
登录 并 只 会 看 到 他 们 各 自 的 会 话 ,服务 器 操作 系统 以 透明 的 方式 将 该 会 话 独 立 于 其 他 任何 客 
户 端 会 话 进行 管理 。 通 过 检查 测试 工具 组 件 协同 工作 可 以 了 解 测试 工具 组 件 在 终端 会 话 期 间 
如 何 协同 工作 。 

终端 服务 器 客户 端 可 以 同时 运行 多 个 终端 会 话 。 使 用 终端 服务 管理 器 ,可 以 选择 要 在 方 
案 中 使 用 的 终端 数量 (如 果 有 足够 的 终端 会 话 在 运行 ) 以 及 每 个 终端 可 以 运行 的 最 大 Vuser 
数 。 这 样 ,终端 服务 管理 器 便 可 以 在 客户 端 会 话 间 均匀 地 分 配 虚拟 用 户 的 数量 。 使 用 终端 服 
务 管理 器 可 以 做 到 以 下 几 点 : 

。 在 负载 生成 器 计算 机 上 设置 终端 服务 器 代理 ; 

。 在 控制 中 心计 算 机 上 启动 终端 客户 端 会 话 ; 

。 使 用 终端 服务 管理 器 在 终端 服务 器 上 分 配 Vuser。 

(6) 配置 WAN 仿真 设置 。 

可 以 使 用 Shunra WAN 仿真 器 在 负载 测试 方案 中 模拟 各 种 网 络 基础 结构 的 行为 。 使 用 
WAN 仿真 ,可 以 在 部 署 前 模拟 并 测试 广域网 (WAN) 对 最 终 用 户 响应 时 间 和 性 能 的 影响 。 使 
用 WAN 仿真 ,可 以 在 测试 环境 中 准确 地 测试 实际 网 络 条 件 下 WAN 部 署 产品 的 点 到 点 的 性 
能 。 通过 引入 极为 可 能 发 生 的 WAN 影响 (如 局 域 网 中 的 滞后 时 间 、 包 丢失 、 链 路 故障 和 动态 
路 由 等 影响 ) ,可 以 描绘 WAN 云图 的 许多 特征 ,并 在 单一 网 络 环境 中 有 效 地 控制 仿真 。 可 以 
在 WAN 仿真 监视 报告 中 观察 仿真 设置 对 网 络 性 能 的 影响 。 

(7) 配置 脚本 。 

为 Vuser 或 Vuser 组 选择 了 脚本 后 ,可 以 编辑 脚本 或 查看 所 选 脚本 的 详细 信息 。 

7) 测试 执行 

(1) 运行 场景 。 

运行 场景 时 ,会 为 Vuser 组 分 配 负载 生成 器 并 执行 它们 的 Vuser 脚本 。 在 场景 执行 期 


间 ,将 要 完成 以 下 工作 : 

。 记录 在 Vuser 脚本 中 定义 的 事务 的 持续 时 间 ; 

。 执行 包括 在 Vuser 脚本 中 的 集合 ; 

。 收集 Vuser 生成 的 错误 .警告 和 通知 消息 。 

可 以 在 无 人 干预 的 情况 下 运行 整个 场景 ,或 者 可 以 交互 地 选择 要 运行 的 Vuser 组 和 
Vuser。 场 景 开始 运行 时 ,Controller 会 首先 检查 场景 配置 信息 。 接 着 , 它 将 调用 已 选 定 与 该 
场景 一 起 运行 的 应 用 程序 。 然 后 , 它 会 将 每 个 Vuser 脚本 分 配给 其 指定 的 负载 生成 器 。 
Vuser 组 就 绪 后 ,它们 将 开始 执行 其 脚本 。 在 场景 运行 时 ,可 以 监视 每 个 Vuser, 查 看 由 Vuser 
生成 的 错误 .警告 和 通知 消息 以 及 停止 Vuser 组 和 各 个 Vuser。 可 以 允许 单个 Vuser 或 组 中 
的 Vuser 在 停止 前 完成 它们 正在 运行 的 迭代 ,在 停止 前 完成 它们 正在 运行 的 操作 或 者 立即 停 
止 运 行 ; 还 可 以 在 场景 运行 时 激活 其 他 Vuser。 在 下 列 情况 下 场景 将 结束 : 所 有 Vuser 已 完 
成 其 脚本 、 持 续 时 间 用 完 或 者 终止 场景 。 下 面 概述 如 何 运行 场景 。 

O@ 打开 现 有 场景 或 新 建 一 个 场景 ; 

@ 配置 并 计划 场景 ; 

@ 设置 结果 目录 ; 

@ 运行 并 监视 场景 。 

(2) 在 执行 期 间 查 看 Vuser。 

可 以 在 场景 执行 期 间 查 看 Vuser 的 活动 : 

。 在 Controller 负载 生成 器 计算 机 中 ,可 以 查看 输出 窗口 ,联机 监视 Vuser 性 能 以 及 查 

看 执行 场景 的 Vuser 的 状态 ; 

。 在 远程 计算 机 中 ,可 以 查看 包含 活动 Vuser 的 有 关 信 息 的 代理 摘要 。 

(3) 监视 场景 。 

工具 一 般 提 供 下列 联 机 监视 器 : 

*“ 和 运行 时 ?监视 器 。 显 示 参 与 场景 的 Vuser 的 数目 和 状态 ,以 及 Vuser 所 生成 的 错误 数 
量 和 类 型 。 此 外 ,还 提供 用 户 定义 的 数据 点 图 :其 中 显示 Vuser 脚本 中 的 用 户 定义 点 
的 实时 值 。 

“事务 "监视 器 。 显 示 场 景 执行 期 间 的 事务 速率 和 响应 时 间 。 

Web 资源 监视 器 。 用 于 度量 场景 运行 期 间 Web 服务 器 上 的 统计 信息 。 它 提供 关于 场 
景 运行 期 间 的 Web 连接 吞吐 量 .HTTP 响应 、 服 务 器 重 试 和 下 载 页 的 数据 。 
“系统 资源 "监视 器 。 测 量 场景 运行 期 间 使 用 的 Windows、UNIX、TUXEDO、SNMP 和 
Antara FlameThrower 资源 。 要 激活 系统 资源 监视 器 ,必须 在 运行 场景 之 前 设置 监视 
“网 络 延迟 ”监视 器 。 显 示 关 于 系统 上 的 网 络 延 迟 的 信息 。 要 激活 网 络 延迟 监视 器 , 必 
须 在 运行 场景 之 前 设置 要 监视 的 网 络 路 径 。 

“防火 墙 ” 监 视 器 。 用 于 度量 场景 运行 期 间 防 火 墙 服务 器 上 的 统计 信息 。 要 激活 防火 
墙 监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 的 资源 列表 。 

“Web 服务 器 资源 ”监视 器 。 用 于 度量 场景 运行 期 间 Apache、 MicrosoftIIS、iPlanet 
(SNMP) 和 iPlanet/Netscape Web 服务 器 上 的 统计 信息 。 要 激活 该 监视 器 ,必须 在 运 
行 场景 之 前 设置 要 监视 的 资源 列表 。 

“Web 应 用 程序 服务 器 资源 ”监视 器 。 用 于 度量 场景 运行 期 间 Web 应 用 程序 服务 器 上 
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的 统计 信息 。 要 激活 该 监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 的 资源 列表 。 

“数据 库 服务 器 资源 ”监视 器 。 用 于 度量 与 SQL Server、Oracle、Svbase 和 DB2 数据 库 
有 关 的 统计 信息 。 要 激活 该 监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 的 度量 列表 。 

“ 流 媒 体 ” 监 视 器 。 用 于 度量 Windows Media 服务 器 、RealPlayer 音频 /视频 服务 器 及 
RealPlayer 客户 端 上 的 统计 信息 。 要 激活 该 监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 
的 资源 列表 。 

“ERP/CRM 服务 器 资源 ”监视 器 。 用 于 度量 场景 运行 期 间 SAP R/3 系统 服务 器 、 
SAP Portal、Siebel Web 服务 器 和 Siebel Server Manager 服务 器 的 统计 信息 。 要 激活 
该 监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 的 资源 列表 。 

“Java 性 能 ”监视 器 。 用 于 度量 Java 2 Platform、Enterprise Edition(J2EE) 对 象 及 使 用 
J2EE 和 EJB 服务 器 计算 机 的 Enterprise Java Bean(EJB) 对 象 的 统计 信息 。 要 激活 该 
监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 的 资源 列表 。 

“应 用 程序 部 署 解决 场景 "监视 器 。 用 于 度量 场景 运行 期 间 Citrix MetaFrame XP 和 
1.8 服务 器 的 统计 信息 。 要 激活 该 监视 器 ,必须 在 运行 场景 之 前 设置 监视 器 选项 。 
“中 间 件 性 能 ?监视 器 。 用 于 度量 场景 运行 期 间 TUXEDO 和 IBM WebSphereMQ 服 
务 器 上 的 统计 信息 。 要 激活 该 监视 器 ,必须 在 运行 场景 之 前 设置 要 监视 的 资源 列表 。 
所 有 的 监视 器 所 收集 的 数据 都 可 以 生成 该 监视 器 的 图 。 

有 些 工具 也 提供 远程 性 能 监控 。 在 负载 测试 运行 过 程 中 ,远程 性 能 监视 器 可 以 查看 特定 
,这 些 图 显示 Vuser 在 服务 器 上 生成 的 负载 信息 。 用 户 在 连接 到 Web 服务 器 的 Web 浏 
上 查看 负载 测试 数据 。 远 程 性 能 监视 器 服务 器 包含 一 个 用 ASP 页 实现 的 网 站 ,以 及 一 个 
负载 测试 图 的 文件 服务 器 。 它 与 Controller 联机 组 件 进行 交互 ,并 按 相 应 的 许可 证 处 理 
查看 负载 测试 的 用 户 数 。 

8) 获得 测试 结果 

在 场景 执行 期 间 ,Vuser 会 在 执行 事务 的 同时 生成 结果 数据 。 要 在 测试 执行 期 间 监 视 场 
能 ,可 以 使 用 联机 监视 工具 。 要 查看 测试 执行 之 后 的 结果 摘要 ,可 以 使 用 下 列 一 个 或 多 个 
。“Vuser 日 志文 件 ” 包 含 对 每 个 Vuser 运行 的 场景 的 完整 跟踪 。 这 些 文件 位 于 方案 结 
果 目 录 中 (在 以 独立 模式 运行 Vuser 脚本 时 ,这 些 文件 放 在 Vuser 脚本 目录 中 ) 。 
“Controller 输出 "窗口 显示 有 关 场 景 运行 的 信息 。 如 果 场 景 运行 失败 ,可 以 在 该 窗口 
中 查找 调试 信息 。 

“Analysis 图 ”有 助 于 确定 系统 性 能 并 提供 有 关 事 务 和 Vuser 的 信息 。 通 过 合并 几 个 
场景 的 结果 或 者 将 几 个 图 合并 成 一 个 图 ,可 以 对 多 个 图 进行 比较 。 

“图 数据 ”视图 和 “原始 数据 ”视图 以 电子 表格 格式 显示 用 于 生成 图 的 实际 数据 。 可 以 
将 这 些 数 据 复制 到 外 部 电子 表格 应 用 程序 ,以 进行 进一步 处 理 。 

“报告 实用 程序 允许 查看 每 个 图 的 摘要 HTML 报告 或 各 种 性 能 和 活动 报告 。 可 以 将 
报告 创建 成 Microsoft Word 文档 , 它 会 自动 以 图 形 或 表格 形式 总 结 和 显示 测试 的 重 
要 数据 。 

工具 的 结果 分 析 功 能 是 有 限 的 ,要 定位 问题 测试 .工程 师 的 经 验 和 智慧 应 该 起 到 很 大 的 


作用 。 


9.5.4 负载 压力 测试 结果 分 析 


1. 交易 处 理性 能 分 析 
交易 处 理性 能 评估 指标 主要 包括 : 
。 并 发 用 户 数 。 
并 发 用 户 数 是 负载 压力 测试 的 主要 指标 ,体现 了 系统 能 够 承受 的 并 发 性 能 。 测 试 重点 
是 两 类 并 发 用 户 数 指标 : 一 类 是 系统 最 佳 性 能 的 并 发 用 户 数 , 另 一 类 是 系统 能 够 承受 
的 最 大 并 发 用 户 数 ,这 两 类 指标 在 某 种 情况 下 有 可 能 重要 。 
交易 响应 时 间 。 
该 指标 描述 交易 执行 的 快慢 程度 ,这 是 用 户 最 直接 感受 到 的 系统 性 能 ,也 是 故障 定位 
迫切 需要 解决 的 问题 。 
指 每 秒 钟 能 够 成 功 执 行 的 交易 数 ,描述 系统 能 够 提供 的 “产量 ”, 用 户 可 以 以 此 来 评估 
。 吞吐 量 。 
指 每 秒 通过 的 字 节 数 , 以 及 通过 的 总 字 节 数 。 此 指标 在 很 大 程度 上 影响 系统 交易 的 响 
应 时 间 ,形成 响应 时 间 的 “拐点 ”。 
。 点 击 率 。 
描述 系统 响应 请 求 的 快慢 。 
2. 资源 占用 性 能 评估 
资源 占用 主要 涉及 服务 器 操作 系统 资源 占用 、 数 据 库 资 源 占用 .中 间 件 资源 占用 等 内 容 ， 
下 面 分 别论 述 。 
(1) 服务 器 操作 系统 资源 占用 监控 指标 包括 : 
» CPU; 
。 磁盘 管理 ; 
。 内 存 ; 
。 交换 区 SWAP; 
。 进程 ; 
。 安全 控制 ; 
。 文件 系统 。 
(2) 数据 库 资源 占用 监控 指标 包括 : 
。 读 写 页 面 的 使 用 情况 。 
。 超出 共享 内 存 缓冲 区 的 操作 数 。 
。 上 一 轮 查询 期 间作 业 等 待 缓冲 区 的 时 间 。 
共享 内 存 中 物理 日 志和 逮 辑 日 志 的 缓冲 区 的 使 用 率 。 
磁盘 的 数据 块 使 用 情况 以 及 被 频繁 读 写 的 热点 区 域 。 
用 户 事务 或 者 表 空间 事务 。 
关键 业务 的 数据 表 的 表 空 间 增 长 。 
SQL 执行 情况 。 


(3) 中 间 件 资源 占用 监控 。 中 间 件 主要 包括 : 

。 Web 中 间 件 : 

。 应 用 中 间 件 ; 

。 交易 中 间 件 ; 

。 其 他 中 间 件 。 

3. 故障 分 析 

这 里 主要 讨论 故障 分 析 内 容 以 及 优化 调整 设置 内 容 , 同 时 还 与 读者 分 享 故障 分 析 的 经 验 
与 实例 。 

1) 故障 分 析 重 点 内 容 

故障 分 析 的 重点 内 容 包括 以 下 几 个 方面 : 

。 CPU 问题 ; 

。 应 用 程序 问题 ; 

。 内 存 和 高 速 缓 存 ; 

。 磁盘 (IO) 资 源 问题 ; 

。 配置 参数 ; 

。 应 用 系统 网 络 设置 ; 

。 数据 库 服务 器 故障 定位 。 

2) 经 验 探 讨 

(1) 应 用 举例 1 。 

交易 的 响应 时 间 如 果 很 长 , 远 远 超过 系统 性 能 的 需求 ,表示 耗费 CPU 的 数据 库 操作 。 例 
如 排序 ,执行 aggregate function( 例 如 sum、mnin、max 和 count) 等 较 多 ,可 考虑 是 否 有 索引 以 
及 索引 建立 的 是 否 合理 。 尽 量 使 用 简单 的 表 链 接 、 水 平分 割 大 表格 等 方法 来 降低 该 值 。 

(2) 应 用 举例 2。 

测试 工具 可 以 模拟 不 同 的 虚拟 用 户 来 单独 访问 Web 服务 器 、 应 用 服务 器 和 数据 库 服务 
器 ,这 样 通过 在 Web 端 测 出 的 响应 时 间 减 去 以 上 各 个 分 段 测 出 的 时 间 ,就 可 以 知道 瓶颈 在 哪 
里 并 着 手 调 优 。 

(3) 应 用 举例 3。 

UNIX 资源 监控 (NT 操作 系统 同 理 ) 中 指标 内 存 页 交换 速率 (Paging rate) ,如 果 该 值 偶 尔 
走高 ,表明 当时 有 线程 竞争 内 存 。 如 果 持 续 很 高 , 则 内 存 可 能 是 瓶颈 ,也 可 能 是 内 存 访问 命中 
率 低 。Swap in rate 和 Swap out rate 也 有 类 似 的 解释 。 

(4) 应 用 举例 4。 

UNIX 资源 监控 (NT 操作 系统 同 理 ) 中 指标 CPU 占用 率 (CPU utilization) ,如 果 该 值 持 
续 超 过 95% ,表明 瓶颈 是 CPU。 可 以 考虑 增加 一 个 处 理 器 或 换 一 个 更 快 的 处 理 器 。 合 理 使 用 
的 范围 在 60%~~70% 之 间 。 

(5) 应 用 举例 5。 

Tuxedo 资源 监控 中 指标 队列 中 的 字 节 数 (Bytes on queue) ,队列 长 度 应 不 超过 磁盘 数 的 
1.5 一 2 倍 。 要 提高 性 能 ,可 增加 磁盘 。 注 意 : 一 个 Raid Disk 实际 有 多 个 磁盘 。 

(6) 应 用 举例 6。 

SQL Server 资源 监控 中 指标 缓存 点 击 率 (Cache Hit Ratio) ,该 值 越 高 越 好 。 如 果 持 续 低 
于 80% ,应 考虑 增加 内 存 。 注 意 : 该 参数 值 是 从 SQL Server 启动 后 就 一 直 累 加 记 数 ,所 以 运 


行经 过 一 段 时 间 后 ,该 值 将 不 能 反映 系统 当前 值 。 

3) 优化 调整 设置 

针对 上 述 故 障 分 析 的 重点 内 容 , 需 要 做 相应 的 优化 调整 ,建议 如 下 。 

(1) CPU 问题 。 

@ 考虑 使 用 更 高 级 的 CPU 代替 目前 的 CPU。 

@ 对 于 多 CPU ,考虑 CPU 之 间 的 负载 分 配 。 

@ 考虑 在 其 他 体系 上 设计 系统 ,例如 增加 前 置 机 、 设 置 并 行 服务 器 等 。 

(2) 内 存 和 高 速 缓存 。 

O@ 内存 的 优化 包括 操作 系统 、 数 据 库 、 应 用 程序 的 内 存 优 化 。 

@ 过 多 的 分 页 与 交换 可 能 降低 系统 的 性 能 。 

@ 内 存 分 配 也 是 影响 系统 性 能 的 主要 原因 。 

@ 保证 保留 列表 具有 较 大 的 邻接 内 存 块 。 

加 调整 数据 块 缓冲 区 大 小 (用 数据 块 的 个 数 表示 ) 是 一 个 重要 内 容 。 

将 最 频繁 使 用 的 数据 保存 在 存储 区 中 。 

(3) 磁盘 (CI/O) 资 源 问题 。 

a 磁盘 读 写 进 度 对 数据 库 系 统 是 至 关 重 要 的 ,数据库 对 象 在 物理 设备 上 的 合理 分 布 能 改 
善 性 能 。 

@ 磁盘 镜像 会 减 慢 磁盘 写 的 速度 。 

@ 通过 把 日 志和 数据 库 对 象 分 布 在 独立 的 设备 上 ,可 以 提高 系统 的 性 能 。 

@ 把 不 同 的 数据 库 放 在 不 同 的 硬盘 上 ,可 以 提高 读 写 速度 。 建 议 把 数据 库 、 回 滚 段 日志 
放 在 不 同 的 设备 上 。 

@ 把 表 放 在 一 块 硬盘 上 ,把 非得 的 索引 放 在 另 一 块 硬盘 上 ,保证 物理 读 写 更 快 。 

(4) 调整 配置 参数 。 

@ 包括 操作 系统 和 数据 库 的 参数 配置 。 

@ 并 行 操作 资源 限制 的 参数 (并 发 用 户 的 数目 ,会话 数 )。 

@ 影响 资源 开销 的 参数 。 

@@ 与 I/O 有关 的 参数 。 

(5) 优化 应 用 系统 网 络 设置 。 

Oz 可 以 通过 数组 接口 来 减少 网 络 呼叫 。 不 是 一 次 提取 一 行 , 而 是 在 单个 往来 往返 中 提取 
10 行 ,这 样 做 效率 较 高 。 

@ 调整 会 话 数 据 单元 的 缓冲 区 大 小 。 

@ 共享 服务 进程 比 专用 服务 进程 提供 更 好 的 性 能 。 

4) 负载 压力 典型 问题 分 析 

负载 压力 测试 需要 识别 的 故障 问题 主要 包括 : 

。 非 正确 执行 的 处 理 。 

。 速度 瓶颈 与 延迟 。 

。 不 能 达到 满意 服务 水 平 。 

。 接口 页 面 不 能 正确 地 装载 或 者 根本 不 能 装载 。 

当 在 合理 的 加 载 下 出 现 这 些 类 型 的 问题 时 , 则 表示 可 能 有 基础 性 的 设计 问题 ,比如 算法 问 
题 , 低 效 的 数据 库 应 用 程序 交互 作用 等 ,这 些 都 不 是 通过 简单 升级 硬件 以 及 调整 系统 配置 就 可 


以 解决 的 问题 ,此 时 软件 的 故障 定位 和 调 优 将 占有 更 重要 的 地 位 。 

5) Web 网 站 故障 分 析 举 例 

目前 Web 开发 者 开始 提供 可 定制 的 Web 网 站 ,例如 , 像 搜索 数据 之 类 的 任务 现在 可 以 由 
服务 器 执行 ,而 无 须 客户 干预 。 然 而 ,这 些 变革 也 导致 了 一 个 结果 ,这 就 是 许多 网 站 都 在 使 用 
大 量 的 未 经 优化 的 数据 库 调 用 ,从 而 使 得 应 用 性 能 大 打折 扣 。 

可 以 使 用 以 下 几 种 方法 来 解决 这 些 问题 : 

。 优化 ASP 代码 。 

。 优化 数据 库 调 用 。 

。 使 用 存储 过 程 。 

。 调整 服务 器 性 能 。 

优秀 的 网 站 设计 都 会 关注 这 些 问题 。 然 而 ,与 静态 页 面 的 速度 相 比 ,任何 数据 库 调 用 都 会 
显著 地 影响 Web 网 站 的 响应 速度 ,这 主要 是 因为 在 发 送 页 面 之 前 必须 单独 地 为 每 个 访问 网 站 
的 用 户 进 行 数据 库 调 用 。 

这 里 提出 的 性 能 优化 方案 正 是 基于 以 下 事实 : 访问 静态 HTML 页 面 要 比 访问 那些 内 容 
依赖 于 数据 库 调用 的 页 面 要 快 。 它 的 基本 思想 是 : 在 用 户 访问 页 面 之 前 ,预先 从 数据 库 提取 
信息 , 写 人 存储 在 服务 器 上 的 静态 HTML 页 面 。 为 了 保证 这 些 静 态 页 面 能 够 及 时 地 反映 不 
断 变化 的 数据 库 数据 ,必须 有 一 个 调度 程序 管理 静态 页 面 的 生成 。 当 然 , 这 种 方案 并 不 能 够 适 
应 所 有 的 情形 。 例 如 ,如 果 是 从 持续 变化 的 大 容量 数据 库 提取 少量 信息 ,这 种 方案 是 不 合 
适 的 。 

每 当 该 页 面 被 调用 时 ,脚本 就 会 提取 最 后 的 更 新 时 间 并 将 它 与 当前 时 间 比 较 。 如 果 两 个 
时 间 之 间 的 差 值 大 于 预定 的 数值 ,更 新 脚本 就 会 运行 ,否则 该 ASP 页 面 把 余下 的 HTML 代码 
发 送 给 浏览 器 。 

如 果 每 次 访问 ASP 页 面 的 时 候 都 要 提供 最 新 的 信息 ,或 者 输出 与 用 户 输入 密切 相关 ,这 
种 方法 并 不 实用 ,但 这 种 方法 可 以 适应 以 固定 的 时 间 间 隔 更 新 信息 的 场合 。 

如 果 数 据 库 内 容 由 客户 通过 适当 的 ASP 页 面 更 新 ,要 确保 静态 页 面 也 能 够 自动 反映 数据 
的 变化 ,可 以 在 ASP 页 面 中 调用 Update 脚本 。 这 样 ,每 当 数 据 库 内 容 改 变 时 ,服务 器 上 也 有 
了 最 新 的 静态 HTML 页 面 。 

另 一 种 处 理 频 繁 变动 数据 的 办 法 是 借助 Microsoft SQL Server 7.0 以 上 版 本 的 Web 助 
手 向 导 (Web Assistant Wizard) ,这 个 向 导 能 够 利用 Transact-SQL ,存储 过 程 等 从 SQL Server 
数据 生成 标准 的 HTML 文件 。 

Web 助手 向 导 能 够 用 来 定期 地 生成 HTML 页 面 。 正 如 前 面 概要 介绍 的 方案 , Web 助手 
可 以 通过 触发 子 更 新 HTML 页 面 ,比如 在 指定 的 时 间 执 行 更 新 或 者 在 数据 库 数据 变化 时 执 
行 更 新 。SQL Server 使 用 名 为 sp_makewebtask 的 存储 过 程 创建 HTML 页 面 , 它 的 参数 是 目 
标 HTML 文件 的 名 字 和 待 执 行 存储 过 程 的 名 字 , 查 询 的 输出 发 送 到 HTML 页 面 。 另 外 ,也 
可 以 选择 使 用 可 供 结果 数据 插入 的 模板 文件 。 万 一 用 户 访问 页 面 的 时 候 正 好 在 执行 更 新 ,可 
以 利用 锁 或 者 其 他 类 似 的 机 制 把 页 面 延迟 几 秒 钟 。 我 们 对 纯 HTML 加 调度 ASP 代码 和 普通 
的 ASP 文件 进行 了 性 能 测试 。 普 通 的 ASP 文件 要 查找 5 个 不 同 的 表 为 页 面 提取 数据 。 为 了 
和 这 两 个 文件 相 比 较 , 对 一 个 只 访问 单个 表 的 ASP 页 面 和 一 个 纯 HTML 文件 也 进行 了 测试 。 
测试 结果 如 表 9-7 所 示 。 


表 9-7 增加 调度 ASP 代码 和 普通 ASP 代码 测试 对 比 


交 梓 者 学 命中 数 平均 TTFB/ms 平均 TTLB/ms 
纯 HTML 文件 8 47 474 
只 访问 单个 表 的 ASP 页 面 8 68. 88 789. 38 
普通 的 ASP 文 件 9 125. 89 3759. 56 
纯 HTML 加 调度 ASP 代码 9 149. 89 1739. 89 


其 中 TTFB 是 指 “Total Time to First Byte”,TTLB 是 指 “Total Time to Last Byte”。 测 
试 结果 显示 ,访问 单个 表 的 ASP 页 面 的 处 理 时 间 是 720. 5ms, 而 纯 HTML 文件 则 为 427ms。 
普通 的 ASP 文件 和 纯 HTML 加 调度 ASP 代码 的 输出 时 间 相 同 , 但 它们 的 处 理 时 间 分 别 为 
3633. 67ms 和 1590ms。 也 就 是 说 ,在 这 个 测试 环境 下 可 以 把 处 理 速度 提高 43%。 如 果 要 让 
页 面 每 隔 一 定 的 访问 次 数 进行 更 新 ,比如 100 次 ,那么 这 第 100 个 用 户 就 必须 等 待 新 的 
HTML 页 面 生成 。 

静态 页 面 方法 并 不 能 够 适合 所 有 类 型 的 页 面 。 例 如 , 某 些 页 面 在 进行 任何 处 理 之 前 必须 要 
有 用 户 输入 。 但 是 ,这 种 方法 可 以 成 功 地 应 用 到 那些 不 依赖 用 户 输入 却 进行 大 量 数据 库 调 用 的 
页 面 ,而 且 这 种 情况 下 它 将 发 挥 出 更 大 的 效率 。 在 大 多 数 情况 下 ,动态 页 面 的 生成 将 在 相当 大 的 
程度 上 提高 网 站 的 性 能 ,而 且 无 须 在 功能 上 有 所 折 中 。 虽 然 有 许多 大 的 网 站 采用 了 这 个 策略 来 
改善 性 能 ,但 也 有 许多 网 站 完全 由 于 进行 大 量 没有 必要 的 数据 库 调 用 ,而 使 性 能 表现 很 差 。 


9.5.5 系统 性 能 调 优 


1. 网 络 级 调 优 

网 络 级 调 优 可 以 从 以 下 方面 考虑 : 

(1) 使 用 存储 过 程 以 减少 总 体 通 信 量 。 

(2) 数据 应 进行 过 滤 ,以 避免 大 批量 的 传送 应 用 程序 只 请 求 需要 的 行 和 列 ,应 在 服务 器 端 过 
滤 掉 尽 可 能 多 的 数据 以 减少 需要 发 送 的 包 的 数目 。 在 许多 情况 下 ,这 还 可 减少 磁盘 IO 负载 。 

(3) 可 以 根据 应 用 的 需要 配置 适合 网 络 包 大 小 。OLTP: 小 包 ,OLAP 及 DSS: 大 包 。 

(4) 通过 对 网 络 的 流量 ,瓶颈 和 速度 的 分 析 , 对 网 络 参数 的 优化 。 

(5) 对 负载 大 的 网 络 进行 隔离 , 即 把 网 络 使 用 多 的 用 户 和 网 络 使 用 少 的 用 户 分 开 。 

(6) 在 应 用 中 限制 大 的 网 络 负载 请 求 。 

2. 操作 系统 级 的 优化 

操作 系统 级 的 优化 可 以 从 以 下 方面 考虑 : 

(1) 是 否 有 足够 的 系统 1/O。 

。 单个 硬盘 速度 。 

。 总 带宽 是 否 大 于 并 行 硬盘 带宽 总 和 。 

(2) 是 否 有 足够 的 物理 内 存 

。 是 否 有 大 量 页 交换 (swapping) 。 

。 考虑 是 否 有 数据 库 服 务 器 所 需 的 足够 内 存 。 

3. 数据 库 服务 器 参数 配置 策略 优化 

1) 内 存 管理 

数据 库 占 用 的 共享 内 存 分 成 存储 过 程 缓冲 区 (procedure cache) .数据 缓冲 区 (data cache) 、 命 


名 缓存 等 几 部 分 : 

(1) 存储 过 程 缓冲 区 。 

存储 过 程 缓冲 区 保存 有 以 下 对 象 的 查询 计划 : 存储 过 程 、. 触 发 器 、 视 图、 规则、 默认 、 游 标 
等 。 存 储 过 程 不 可 重信 , 即 每 个 并 发 用 户 调用 都 会 在 内 存 中 产生 一 个 拷贝 。 当 存储 过 程 、 触 发 
器 ,视图 被 装载 到 存储 过 程 缓冲 区 时 ,被 查询 优化 器 优化 ,建立 查询 计划 。 如 果 存 储 过 程 在 缓 
冲 区 中 ,被 调用 就 不 需要 重新 编译 。 如 果 存 储 过 程 缓冲 区 太 小 ,存储 过 程 就 会 经 常 被 其 他 调 人 
内 存 的 存储 过 程 覆盖 掉 , 当 再 次 被 调用 时 ,存储 过 程 又 被 调 入 内存, 再 重新 编译 ,用 户 请 求 因此 
不 得 不 等 待 。 最 严重 的 情况 ,如果 存储 过 程 缓冲 区 不 够 ,存储 过 程 甚至 都 不 能 运行 。 所 以 在 内 
存 足够 的 情况 下 ,存储 过 程 缓冲 参数 应 尽 可 能 大 一 些 。 

(2) 数据 缓冲 区 。 

数据 缓冲 区 用 来 缓存 数据 页 和 索引 页 ,给 服务 器 增加 物理 内 存 以 扩大 数据 缓冲 区 是 提高 
数据 库 性 能 最 有 效 的 方法 。 当 然 ,如 果 不 能 增加 内 存 , 就 只 能 通过 减少 存储 过 程 缓冲 区 的 比例 
等 方法 来 扩大 数据 缓冲 区 了 。 

(3) 命名 缓存 。 

命名 缓存 是 为 特定 对 象 分 配 一 定 的 内 存 空 间 , 使 得 该 对 象 能 够 始终 享用 这 部 分 内 存 资源 
而 不 受 其 他 对 象 对 资源 竞争 的 影响 。 

2) 锁 策 略 

(1) ASE 锁 是 为 了 保证 在 多 用 户 环境 下 数据 一 致 性 ,但 它 又 降低 了 并 发 性 ,所 以 说 锁 对 
系统 性 能 是 有 影响 的 ,最 严重 的 情况 是 死 锁 。 

(2) 锁 优 化 最 重要 的 工作 是 设置 页 级 锁 升 级 成 表 级 锁 的 阀 限 。 要 尽量 避免 页 锁 很 快 升级 
成 表 级 锁 , 同 时 减少 锁 的 争夺 。 

(3) 不 要 在 无 意义 ID 上 加 聚 簇 索 引 , 以 避免 在 同一 页 的 锁 竞 争 。 

(4) 在 满足 应 用 需求 的 情况 下 ,尽量 降低 锁 级 别 。 

3) 数据 库存 储 设备 的 存储 策略 的 优化 

(1) 为 了 改善 数据 库 的 性 能 ,设备 的 优化 也 必 不 可 少 。 把 最 常 插入 的 表 分 区 放 在 多 个 设 
备 上 ,这 样 可 以 创建 多 个 页 链 , 从 而 改善 多 个 并 发 插入 时 的 性 能 ,因为 每 一 个 插入 都 要 找到 页 
链 , 页 链 有 多 个 ,就 允许 多 个 插入 同时 进行 。 

(2) 物理 W/O 的 代价 远大 于 逻辑 IO, 所 以 要 尽量 减少 磁盘 进行 物理 IO 的 次 数 ,尽量 多 
进行 内 存 中 的 逻辑 I/O 可 以 配置 使 用 大 的 I/O 来 减少 物理 1/O 的 次 数 。 

(3) 在 设备 上 的 存储 数据 策略 就 是 把 对 象 以 合适 的 方式 分 配 到 设备 上 ,以 减少 磁盘 竞争 
和 利用 并 行 /O, 如 : 

。 表 和 索引 分 开 到 不 同 的 磁盘 。 

。 数据 设备 和 日 志 设备 分 开 。 

。 增加 tempdb 的 空间 。 

4. 数据 库 优 化 策略 

(1) 数据 库 表 结构 设计 模式 的 权衡 : 

@ 应 用 的 类 型 分 为 OLTP 和 OLAP 两 类 ,而 支撑 这 两 类 应 用 的 数据 的 特点 是 不 同 的 ,前 
者 为 操作 型 数据 ,后 者 为 分 析 型 数据 ,这 两 类 数据 是 需要 不 同 的 存储 策略 进行 存储 的 。 

@ 对 于 OLTP 的 应 用 ,在 数据 库 的 基础 理论 中 ,倡导 使 用 规范 化 的 数据 库 设 计 方法 ,简称 
范式 设计 。 


。 用 范式 来 设计 数据 库 , 可 以 减少 数据 元 余 度 ,减少 插入 、 更 新 和 删除 异常 ,也 可 以 提高 
性 能 。 

。 但 是 有 时 为 了 提高 某 些 特定 的 性 能 ,有 意 打 破 范 式 设计 ,这 样 可 以 达到 最 好 的 效果 。 
但 这 种 情况 下 ,一 定 要 注意 数据 完整 性 维护 的 问题 。 

。 降 范 式 设计 这 种 方式 一 般 可 以 提高 检索 速度 ,但 会 略微 降低 数据 修改 性 能 。 对 于 应 
开发 来 说 ,有 些 情况 下 降 范式 设计 还 能 简化 应 用 程序 的 编码 。 

。 具体 而 言 , 降 范式 设计 一 般 能 带 来 如 下 好 处 : 减少 表 连 接 的 需要 ,减少 外 部 键 和 索引 ， 
减少 表 的 数量 ,聚合 列 可 以 预先 计算 等 。 

@ 规范 设计 : 3NF。 

。 优点: 小 表 , 数 据 一 致 性 维护 容易 。 

。 缺点 : 表 连 接 操作 多 ,程序 复杂 性 高 。 

@ 非 规范 化 : 增加 元 余 列 、 派 生 列 、 分 表 、 合 表 、 重 复 表 。 

。 优点: 性 能 高 ,编程 复杂 性 降低 。 

。 缺点: 数据 一 致 性 维护 困难 ,会 浪费 磁盘 空间 。 

@ 有 如 下 方法 可 以 实现 降 范 式 设计 : 

。 增加 宛 余 列 。 

。 增加 导出 列 , 从 一 个 或 多 个 表 的 几 个 列 中 导出 另 一 个 列 。 

。 收拢 表 , 几 个 表 合成 一 个 表 。 

。 复制 表 , 即 制作 表 的 副本 。 

。 将 表 分 开 , 分 为 垂直 和 水 平 两 种 : 水 平分 开 可 以 考虑 把 表 中 不 太 活 跃 的 数据 放置 在 一 
个 表 中 ,而 把 经 常 变动 的 数据 放 在 另 一 个 表 中 。 垂 直 分 开 则 是 把 多 个 列 分 成 几 组 ,每 
一 组 列 成 一 个 表 。 

@ 是 否 要 采用 降 范式 设计 ,必须 根据 具体 应 用 综合 考虑 。 这 种 设计 理念 往往 紧密 结合 县 


体 应 用 ,和 应 用 的 相关 度 很 高 ,所 以 要 求 数据 库 分 析 员 兼 具 业 务 分 析 员 的 角色 。 


(2) 将 数据 划分 为 当前 数据 和 历史 数据 ,有 助 于 当前 系统 操作 的 性 能 。 

(3) 采用 阅 值 机 制 能 控制 空间 的 膨胀 或 起 一 定 的 预警 作用 。 

(4) 索引 : 

Q@ 查询 条 件 和 索引 的 配合 使 用 对 SQL 语句 的 性 能 至 关 重 要 。 下 面 是 两 种 常见 的 情况 : 

。 如 果 查 询 条 件 中 包括 索引 的 第 一 个 列 , 而 且 结 果 列 都 在 索引 列 中 ,系统 使 用 匹配 索引 
定位 会 定位 到 索引 的 页 级 ,这 时 可 从 索引 页 中 直接 提取 结果 ,不 需要 使 用 数据 页 。 

。 如 果 查 询 条 件 中 不 包括 索引 的 第 一 个 列 , 而 且 结 果 列 都 在 索引 列 中 ,系统 使 用 非 匹 配 
索引 扫描 ,不 扫描 数据 页 ,从 索引 页 中 直接 提取 结果 。 这 种 情况 也 不 使 用 数据 页 。 

@ 尽量 使 SQL 语句 在 执行 中 用 到 索引 ,才能 实现 高 效率 的 查询 。 

。 每 个 表 一 般 都 需要 索引 ,除非 数据 量 特别 少 的 表 。 

。 索引 设计 应 在 数据 库 总 体 设计 中 统一 集中 考虑 。 

。 可 以 充分 利用 索引 的 where 条 件 书写 格式 为 “column operator expression”, 这 里 的 
operator 一 般 是 三 、 二 二 、 二 = 二 =、\is null。 而 如 果 operator 是 ! 王 、! 二 , 便 不 能 充 
分 利用 索引 。 如 果 要 充分 利用 索引 ,在 column 中 就 不 要 包括 函数 和 其 他 操作 。 

。 where 子 句 中 ,expression 必须 是 常量 或 可 以 转化 成 常量 。 查 询 优化 器 认为 ,between 
相当 于 二 = 和 去 = ,like 'Ger% ' 相 当 于 之 = 'Ger'and 二 'Ges'。 但 是 ,like '%ber' 因 为 


没有 给 出 首 字母 ,就 不 能 转化 成 这 种 结果 。 

最 好 将 盖 变 为 二 = ,二 变 为 二 一 ,not exists 变 为 exists,not in 变 为 in。 

如 果 被 查询 列 都 包括 在 索引 列 中 ,这 种 查询 叫 索 引 覆 盖 查 询 。 这 种 查询 效率 比较 高 ， 
应 尽量 使 用 这 种 查询 。 

在 做 表 连 接 查 询 时 ,在 外 表 的 连接 列 上 建立 索引 可 以 大 大 加 快速 度 。 

程序 中 尽量 避免 修改 索引 键 值 。 

群集 索引 通常 用 于 主键 标 , 因 为 主键 标 一 般 是 一 张 表 的 主 访问 路 径 。 不 过 ,在 下 列 情 
况 下 也 可 采用 群集 索引 : 

@ 范围 查找 ,含有 大 量 重复 值 的 字段 ; 

@ ORDER BY 中 常 引用 的 字段 ; 

@ 连接 子 句 中 引用 的 不 是 主键 标的 字段; 

m 非常 频繁 地 被 访问 的 字段 。 

非 群 集 索引 一 般 用 于 以 下 情况 : 

和 单行 查找 ; 

@ 连接 运算 以 及 在 选择 性 很 高 的 字段 上 的 查询 ; 

@ 带 有 小 范围 检索 的 查询 。 

虽然 采用 索引 可 以 提高 数据 库 的 查询 性 能 ,但 过 多 的 索引 会 适得其反 ,这 是 因为 在 修 
改 , 搬 入 或 删除 数据 时 为 了 保持 最 新 的 索引 ,必须 引发 系统 1/O 开销 。 因 此 当 索 引 列 
中 的 大 量 数据 被 增加 、 改 变 或 删除 时 ,应 使 用 命令 UP_DATE STATISTICS 保持 索引 


的 最 新 状况 。 
5. 应 用 级 的 优化 
应 用 级 的 调 优 主要 是 减少 公用 资源 争 用 和 磁盘 1/O, 调 优 专 家 80% 的 调 优 结果 都 来 源 于 
减少 磁盘 I/O。 


(1) 决定 处 理 是 在 服务 器 上 进行 还 是 在 客户 端 进行 。 

(2) 为 了 更 有 效 地 进行 优化 ,有 些 应 用 需要 进行 重新 改写 和 优化 程序 的 实现 迎 辑 。 

(3) 事务 的 设计 降低 了 系统 的 并 发 性 ,尤其 是 长 事务 会 使 其 他 用 户 不 能 及 时 访问 数据 。 
由 长 事务 变 为 短 事务 也 是 性 能 优化 的 一 个 课题 。 

(4) 使 用 存储 过 程 减少 编译 及 网 络 传输 的 时 间 。 

6. 服务 器 端 应 用 的 优化 

(1) 查询 语句 在 执行 时 要 尽 可 能 用 上 索引 。 

(2) 判断 数据 存在 性 时 用 exists 而 不 用 countC* ) 。 

(3) 表 连 接 操 作 中 的 or 语句 若 能 变 为 union 操作 .ASE 可 优化 。 

(4) min 和 max 函数 。 

。 若 这 两 个 函数 所 使 用 的 列 为 索引 的 第 一 列 ,ASE 可 优化 ,只 需 索 引 页 。 

。 不 要 在 两 个 函数 中 用 表达 式 , 如 max(numeric_col) * 2, 而 把 它 变 为 max(numeric_col) x 2。 

(5) 尽量 避免 使 用 cursor。 

(6) 尽 可 能 使 用 存储 过 程 ,并 适时 对 存储 过 程 进行 重新 编译 (sp_recompile) 。 

7. 客户 端 应 用 的 优化 

(1) 继承 结构 级 优化 。 

剔除 宛 余 的 继承 层 , 减 少 继承 的 导数, 有些 层 的 处 理 很 少 可 以 直接 移植 到 相近 的 子 或 


父 层 。 

(2) 事件 级 优化 。 

调用 频率 很 高 的 事件 脚本 优化 ,比如 datawindow 的 rowfocuschanged 之 类 的 事件 在 继承 
的 各 个 层次 中 都 有 脚本 ; 容易 嵌 套 脚本 的 优化 ,pb 中 很 多 事件 是 嵌 套 触发 的 ,优化 能 使 嵌 套 
沿 着 最 佳 路 线 进行 触发 。 

(3) 变量 级 优化 。 

尤其 是 实例 变量 ,经 常 在 程序 中 有 多 次 赋值 ,容易 出 错 ,对 变量 的 初始 化 最 好 在 一 起 处 理 ， 
这 样 不 容易 重复 赋值 或 赋值 不 完整 。 

(4) 耦合 处 理 。 

对 于 多 次 类 似 的 处 理 提升 为 一 个 函数 ,减少 脚本 的 宛 余 。 

(5) 业务 多 辑 辅助 工具 。 

对 于 很 重要 而 且 经 常 使 用 的 业务 处 理 单元 开发 对 应 的 业务 逻辑 校 验 工 具 , 可 以 轻松 找 出 
数据 的 问题 或 批量 优化 数据 。 

8. 性 能 设计 和 调 优 过 程 中 通常 是 多 种 因素 的 平衡 

(1) 一 致 性 与 并 发 性 的 平衡 一 一 锁 。 

(2) 查询 速度 与 更 新 速度 。 

(3) 时 间 与 空间 一 一 索引 。 


9.6 游戏 测试 


9.6.1 游戏 测试 的 基本 概念 


1. 游戏 开发 

要 了 解 如 何 测 试 游戏 ,必须 了 解 如 何 做 游戏 ,了 解 它 的 开发 过 程 。 游 戏 要 成 功 ,其 基本 的 
必要 条 件 有 3 个: Vision( 设 计 )、Technology( 技 术 ) 和 Process( 过 程 ),3 个 条 件 缺 一 不 可 ,如 
图 9-21 所 示 。 

。 Vision: 对 还 没有 实现 的 游戏 从 总 体 上 的 把 握 , 前 瞻 
性 的 理解 与 策略 的 考量 。 
Technology: 有 了 Vision ,如 果 没 有 技术 的 话 , 则 各 种 
美妙 的 想法 只 能 停留 在 虚无 绿 纵 的 阶段 ,必须 通过 技 
术 来 实现 Vision。 9-21 游戏 开发 的 3 个 条 件 
Process: 有 了 Vision 作为 指导 ,有 了 技术 作为 保证 ,也 不 一 定 能 够 把 好 的 想法 转换 成 
高 质量 的 游戏 。 要 创造 高 品质 的 游戏 , 尚 缺 重要 的 一 环 过 程 ,制造 游戏 是 一 个 非 
常 复杂 .长 时 间 的 动态 过 程 。 游 戏 产品 的 质量 则 是 要 靠 动 态 过 程 的 动态 质量 来 进行 保 
证 。 过 程 由 很 多 复杂 的 相互 牵制 的 环节 与 部 件 组 成 ,如 果 任 意 的 环节 或 者 是 部 件 出 了 
问题 都 会 对 最 终 的 产品 质量 产生 影响 。 因 此 对 这 个 动态 的 过 程 ,一 定 要 有 规划 与 控 
制 , 以 保证 按部就班 , 按 质 按时 完成 工作 。 
这 里 简单 描述 游戏 软件 和 通用 软件 在 开发 过 程 中 的 区 别 : 
(1) 通用 软件 的 需求 明确 ,游戏 软件 的 需求 存在 理想 化 。 
通用 软件 中 用 户 每 步 操作 的 预期 结果 明确 且 有 规范 可 参考 ,而 游戏 ,特别 是 网 游 中 并 不 是 


Technology 


所 有 的 需求 都 有 一 个 明确 的 预期 结果 , 拿 技 能 平衡 性 来 说 ,所 谓 的 平衡 也 只 是 相对 的 平衡 ,而 
非 绝 对 的 平衡 。 没 有 什么 明确 的 参考 参数 ,只 能 根据 以 往 游戏 的 经 验 获 得 一 个 感知 的 结果 。 

网 络 游戏 中 的 某 些 功能 是 有 预期 结果 可 参考 的 ,例如 组 队 、 交 易 , 而 另外 一 些 带 有 策划 创 
意 的 功能 却 是 根据 策划 个 人 的 理解 来 确定 其 预期 结果 的 。 人 的 思考 力 都 是 有 限 的 ,所 以 不 能 
保证 在 创意 中 会 考虑 到 各 种 各 样 复杂 的 细节 ,也 不 能 够 保证 这 个 创意 就 可 以 完全 被 用 户 所 
接受 。 

(2) 通用 软件 开发 过 程 中 需求 变更 少 ,游戏 软件 开发 过 程 中 需求 变化 快 。 

通用 软件 的 使 用 人 群 和 软件 的 功能 针对 性 决定 软件 从 开始 制作 就 尽量 减少 新 的 需求 或 需 
求 变更 。 而 游戏 软件 为 了 满足 玩家 对 游戏 的 认可 度 ,策划 需要 不 断 地 揣摩 玩家 的 喜好 ,进行 游 
戏 功 能 的 改进 。 加 之 网 游 制作 本 身 就 是 一 个 庞大 复杂 的 工程 ,开发 者 不 可 能 做 到 在 开发 的 前 
期 就 对 游戏 架构 及 扩展 性 做 出 最 好 的 评估 ,所 以 会 导致 为 了 满足 用 户 的 需求 而 不 断 地 进行 一 
些 基础 架构 的 修改 ,基础 架构 的 修改 必然 导致 某 些 功能 的 颠覆 。 所 以 就 出 现 了 游戏 开发 过 程 
中 的 一 个 恶性 循环 , 当 基础 架构 修改 满意 了 ,玩家 的 需求 又 有 了 新 的 变化 , 随 之 而 来 的 又 要 进 
行 新 的 调整 ,再 进行 新 的 修改 ,最 终 导致 了 游戏 软件 的 开发 周期 不 断 加 长 。 任 何 一 个 有 经 验 的 
团队 ,对 于 每 一 个 影响 基础 的 改动 都 应 该 做 出 正确 的 评估 。 

(3) 开发 过 程 的 阶段 不 同 。 

游戏 开发 过 程 一 般 包括 游戏 策划 、 游 戏 设计 (其 中 包括 游戏 剧本 等 游戏 元 素 的 设计 等 )、 编 
辑 器 设计 (通常 指 游戏 引擎 ) ,关卡 设计 、 关 卡 制作 、 游 戏 贴图 、 验 收 等 阶段 ,常常 是 迭代 开发 并 
伴随 着 测试 。 而 通常 的 软件 开发 包括 需求 调研 、 需 求 分 析 、 概 要 设计 ,详细 设计 编码 、 验 收 等 
阶段 。 

2. 游戏 测试 与 开发 过 程 的 关系 

大 家 对 软件 成 熟 模型 (Capability Maturity Model,CMM) 和 (Capability Maturity Model 
Integration,CMMD) 可 能 比较 熟悉 ,但 在 实施 的 过 程 中 会 存在 这 样 那样 的 问题 ,对 于 游戏 开发 
而 言 很 难 在 CMM/CMMI 的 框架 下 定义 一 种 固定 的 适合 游戏 开发 的 过 程 模型 。 游 戏 开 发 团 
队 是 一 个 长 期 的 ,持续 的 开发 团队 ,应 对 游戏 本 身 及 其 开发 有 着 很 深 的 认识 。 我 们 认为 游戏 的 
Process( 过 程 ) 实 际 上 也 是 一 个 软件 过 程 ,不 过 是 特殊 的 游戏 软件 开发 过 程 而 已 ,各 个 生命 周 
期 是 相通 的 。 所 以 总 结 一 套 以 测试 作为 质量 驱动 的 .属于 游戏 的 开发 过 程 。 如 图 9-22 所 示 是 
游戏 的 迭代 式 开 发 过 程 示意 图 。 

由 于 网 络 游戏 的 生命 周期 一 般 是 三 四 年 ,因此 常常 采用 迭代 式 的 开发 过 程 , 既 可 以 适应 网 
络 游戏 本 身 这 种 长 周期 的 开发 ,又 可 以 充分 利用 RUP 的 和 迭代 式 开 发 的 优点 与 CMM/CMMI 
框架 中 的 里 程 碑 控制 来 进行 开发 管理 ,从 而 达到 对 游戏 产品 的 全 生命 周期 的 质量 保证 。 

在 游戏 开发 过 程 中 ,通用 软件 的 需求 分 析 阶 段 被 策划 所 代 蔡 ,但 所 起 的 作用 是 一 样 的 , 即 
明确 游戏 的 设计 目标 (包括 风格 ,游戏 玩家 群 )、 游 戏 世 界 的 组 成 ,为 后 期 的 程序 设计 ,美工 设 
计 ,测试 打下 基础 ,并 提出 了 明确 的 要 求 。 由 于 开发 是 一 个 阶段 并 迭代 的 过 程 ,因此 测试 与 开 
发 的 结合 就 比较 容易 。 从 图 9-22 中 可 以 看 到 测试 的 工作 与 游戏 的 开发 是 同步 进行 的 ,在 每 一 
个 开发 阶段 测试 都 进行 了 参与 ,这 样 能 够 尽早 地 、 深 入 地 了 解 到 系统 的 整体 与 大 部 分 的 技术 细 
节 , 从 而 从 很 大 程度 上 提高 了 测试 人 员 对 错误 或 缺陷 等 问题 判断 的 准确 性 ,这 样 不 但 后 一 次 选 
代 的 游戏 软件 在 质量 上 高 于 上 一 次 迭代 ,更 重要 的 是 最 后 一 次 迭代 的 软件 质量 能 够 得 到 保证 。 

近 几 年 来 ,游戏 ,尤其 是 网 络 游戏 成 了 网 络 最 新 的 和 弄潮儿 ,游戏 开发 吸引 了 无 数 公司 的 眼 
球 。 但 是 随 着 玩家 品位 的 升 高 ,代理 费用 的 上 升 ,单一 的 代理 国外 游戏 的 模式 已 经 很 难 在 国内 
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图 9-22 ”游戏 迭代 式 开发 与 测试 


立足 ,而 有 中 国 传统 文化 特色 的 网 络 游戏 则 在 国内 大 受 欢迎 ,比如 剑侠 情缘 、 大 话 西游 等 一 些 
内 的 经 典 之 作 已 经 进入 了 一 流 网 游 的 阵营 。 与 此 同时 , 随 着 大 家 对 网 游 稳定 性 、 可 玩 性 要 求 
的 升 高 ,网 络 游戏 测试 开始 成 为 大 家 关注 的 话题 。 

游戏 测试 作为 软件 测试 的 一 部 分 , 它 具 备 了 软件 测试 的 一 切 共 同 特性 , 即 测试 的 目的 是 发 
现 软 件 中 存在 的 缺陷 。 都 是 需要 测试 人 员 按 照 产 品 需求 (如 功能 需求 ,行为 需求 等 ) 描 述 来 实 
施 。 而 在 开发 过 程 中 会 产生 各 种 工作 产品 ,这 个 工作 产品 包括 需求 规格 说 明 书 、 设 计 说 明 书 、 
源 代码 .可 执行 程序 及 用 户 手册 等 。 游 戏 系统 的 系统 级 别 的 测试 都 需要 产品 运行 于 真实 的 或 
是 在 模拟 真实 的 环境 之 下 进行 。 总 而 言 之 ,测试 就 是 发 现 缺陷 并 进行 改进 ,从 而 提升 软件 产品 
的 质量 。 

由 于 游戏 软件 和 通用 软件 在 开发 过 程 中 存在 不 同 ,导致 游戏 软件 的 测试 方法 及 在 测试 内 
容 上 存在 特殊 性 。 


9.6.2 游戏 测试 的 主要 内 容 


虽然 游戏 软件 和 通用 软件 的 开发 阶段 不 同 , 但 是 软件 测试 应 该 贯彻 于 它们 的 每 个 阶段 。 
这 些 测试 包括 静态 的 评审 和 动态 的 运行 用 例 的 测试 。 游 戏 测试 和 通用 测试 一 样 , 可 能 存在 的 
测试 类 型 包括 功能 测试 .结构 性 测试 负载 压力 测试 等 其 他 软件 的 特性 测试 。 

由 于 游戏 软件 的 特殊 性 ,游戏 测试 可 分 为 两 部 分 : 一 是 传统 的 软件 测试 ,二 是 游戏 本 身 的 
测试 。 由 于 游戏 ,特别 是 网 络 游戏 相当 于 网 上 的 虚拟 世界 ,是 人 类 社会 的 另 一 种 方式 的 体现 ， 
因此 也 包含 了 人 类 社会 的 一 部 分 特性 ,同时 它 又 是 游戏 ,还 涉及 娱乐 性 、 可 玩 性 等 独 有 特性 ,所 
以 测试 面相 当 广 ,也 称 之 为 游戏 世界 测试 。 游 戏 测试 主要 有 以 下 几 个 特性 : 

。 游戏 情节 的 测试 。 主 要 指 游戏 世界 中 的 任务 系统 组 成 ,有 人 也 称 其 为 游戏 世界 的 事件 

驱动 ,也 可 称 为 游戏 情感 世界 的 测试 。 

。 游戏 世界 的 平衡 测试 。 主 要 表现 在 经 济 平衡 ,能 力 平 衡 (包含 技能 、 属 性 等 ) ,保证 游戏 

世界 竞争 公平 。 


。 游戏 文化 的 测试 。 比 如 整个 游戏 世界 的 风格 ,是 中 国文 化 主导 ,还 是 日 韩 风格 等 ,大 到 

游戏 整体 ,小 到 人 物 对 话 , 比 如 一 个 书生 ,他 的 对 话 就 必须 斯 文 ,不 可 以 用 江湖 语言 。 

当 作 为 游戏 测试 人 员 时 ,很 多 时 候 需 要 做 的 不 仅仅 是 验证 功能 ,也 需要 帮助 开发 者 和 用 户 
找到 一 个 互相 容忍 的 平衡 点 。 游 戏 软件 的 测试 员 带 有 对 策划 需求 的 怀疑 ,力求 通过 自己 的 努 
力 在 玩家 和 开发 者 之 间 将 可 能 产生 的 矛盾 减 小 。 

游戏 可 玩 性 测试 是 游戏 测试 的 最 重要 内 容 , 其 本 质 是 功能 性 测试 。 另 外 ,游戏 测试 还 可 能 
包括 性 能 、 压 力 等 方面 的 测试 。 游 戏 软件 测试 主要 包含 以 下 方面 : 

(1) 游戏 基本 功能 (任务 ) 测 试 ,保证 游戏 基本 功能 被 覆盖 。 

(2) 游戏 系统 虚拟 世界 的 搭建 ,包含 聊天 功能 ,交易 系统 ,组 队 等 可 以 让 玩家 在 游戏 世界 
交互 的 平台 。 在 构建 交互 平台 的 前 提 下 进行 游戏 完整 情节 的 系统 级 别 的 测试 。 

(3) 游戏 软件 的 风格 、 界 面 测试 。 

(4) 游戏 软件 性 能 、 压 力 等 必要 的 软件 特性 测试 。 

所 有 这 些 测 试 主要 是 通过 功能 实现 的 , 即 主要 体现 在 游戏 可 玩 性 方面 。 虽 然 策 划 时 对 可 
玩 性 作 了 一 定 的 评估 ,但 这 是 总 体 上 的 ,一 些 具体 的 涉及 到 某 个 数据 的 分 析 , 比 如 PK 参数 的 
调整 ,技能 的 增加 等 一 些 增强 可 玩 性 的 测试 则 需要 职业 玩家 对 它 进行 分 析 。 这 里 主要 通过 四 
种 方式 来 达到 测试 的 目的 : 

(1) 内 部 的 测试 人 员 ,他 们 都 是 精 选 的 职业 玩家 分 析 人 员 ,对 游戏 有 很 深 的 认识 ,在 内 部 
测试 时 ,对 上 面 的 4 点 进行 分 析 。 

(2) 利用 外 部 游戏 媒体 专业 人 员 对 游戏 作 分 析 与 介绍 , 既 可 以 达到 宣传 的 效果 ,又 可 以 达 
到 测试 的 目的 ,通常 这 种 方式 是 比较 好 的 。 

(3) 利用 外 部 一 定数 量 的 玩家 对 外 围 系统 的 测试 。 他 们 是 普通 的 玩家 ,但 却 是 我 们 最 主 
要 的 目标 ,主要 的 来 源 是 大 中 院 校 的 学 生 等 。 主 要 测试 游戏 的 可 玩 性 与 易 用 性 ,发 现 一 些 外 围 
的 缺陷 。 

(4) 游戏 进入 到 最 后 阶段 时 ,还 要 做 内 测 ,公测 ,有 点 像 应 用 软件 的 beta 版 的 测试 ,让 更 
多 的 人 参与 测试 ,测试 大 量 玩家 下 的 运行 情况 。 

可 玩 性 测试 是 游戏 最 重要 的 一 块 ,只 有 玩家 的 认同 ,游戏 才 可 能 成 功 。 


9.6.3 游戏 测试 的 实施 


1. 游戏 策划 与 测试 计划 

测试 过 程 不 可 能 在 真空 中 进行 。 如 果 测 试 人 员 不 了 解 游戏 是 由 哪 几 个 部 分 组 成 的 ,那么 
执行 测试 就 非常 的 困难 。 同 时 测试 计划 可 以 明确 测试 的 目标 ,需要 什么 资源 ,进度 的 安排 , 通 
过 测试 计划 , 既 可 以 让 测试 人 员 了 解 此 次 游戏 测试 的 重点 ,又 可 以 与 产品 开发 小 组 进行 交流 。 
在 企业 开发 中 ,测试 计划 书 来 源 于 需求 说 明文 档 。 同 样 ,在 游戏 开发 过 程 中 ,测试 计划 的 来 源 
则 是 策划 书 。 

策划 书包 含 了 游戏 定位 ,风格 ,故事 情节 ,要求 的 配制 等 。 从 里 面 了 解 到 游戏 的 组 成 、 可 玩 
性 平衡 (经 济 与 能 力 ) 与 形式 (单机 版 还 是 网 络 游戏 ) ,而 测试 在 这 一 阶段 主要 的 事情 就 是 通过 
策划 书 来 制定 详细 的 测试 计划 ,主要 分 为 几 个 方面 : 一 是 游戏 程序 本 身 的 测试 计划 ,比如 任务 
系统 ,聊天 ,组 队 , 地 图 等 由 程序 来 实现 的 功能 测试 计划 ; 二 是 游戏 可 玩 性 测试 计划 ,比如 经 济 
平衡 标准 是 否 达 到 要 求 , 各 个 门派 技能 平衡 测试 参数 与 方法 ,游戏 风格 的 测试 ; 三 是 关于 性 能 
测试 的 计划 ,比如 客户 端的 要 求 , 网 络 版 的 对 服务 器 的 性 能 要 求 。 同 时 测试 计划 书 中 还 写 明 了 


基本 的 测试 方法 ,是 否 需要 自动 化 测试 工具 ,为 后 期 的 测试 打下 良好 的 基础 。 同 时 ,由 于 测试 
人 员 参 与 到 策划 评审 ,对 游戏 也 有 很 深入 的 了 解 , 会 对 策划 提出 自己 的 看 法 ,包含 可 玩 性 ,用 户 
群 ,性 能 要 求 等 ,并 形成 对 产品 的 风险 评估 分 析 报 告 。 但 这 份 报告 不 同 于 策划 部 门 自己 的 风险 
分 析 报 告 ,主要 从 旁观 者 的 角度 对 游戏 本 身 的 品质 作 充 分 的 论证 ,从 而 更 有 效 地 对 策划 起 到 控 
制 的 作用 。 

2. 游戏 测试 用 例 设计 

按照 软件 工程 的 理论 ,测试 方法 主要 有 两 种 : 黑 盒 测试 与 白 盒 测试 。 黑 盒 测 试 与 白 盒 测 
试 都 是 最 基本 的 测试 方法 ,属于 低层 的 测试 理论 ,实际 的 测试 方案 和 用 例 设计 都 是 在 这 两 种 测 
试 方法 基础 上 产生 出 来 的 。 对 于 游戏 的 测试 ,也 不 外 乎 这 两 种 测试 方法 。 基 于 黑 盒 测试 所 产 
生 的 测试 方案 属于 高 端 测试 ,主要 是 在 操作 层面 上 对 游戏 进行 测试 ; 基于 白 盒 测试 所 产生 的 
测试 方案 属于 低 端 测试 ,是 对 各 种 设计 细节 方面 的 测试 。 黑 盒 测试 中 不 需要 知道 软件 是 如 何 
运行 的 ,也 不 用 知道 内 部 算法 如 何 设计 ,只 要 看 游戏 中 战斗 或 者 情节 发 展 是 否 是 按照 要 求 来 进 
行 的 就 可 以 了 。 这 种 测试 可 以 找 一 些 对 游戏 不 是 很 了 解 的 玩家 来 进行 ,只 要 写 清楚 要 干什么 ， 
最 后 达到 什么 样 的 效果 ,并 记录 下 游戏 过 程 中 所 出 现 的 问题 。 而 白 盒 测试 就 需要 知道 内 部 的 
运算 方法 ,比如 A 打 B 一 下 ,按照 A 和 B 现 在 的 状态 应 该 流 多 少 血 之 类 都 应 当 属于 这 种 测 
试 。 游 戏 的 白 盒 测试 一 般 需要 开发 人 员 自己 来 完成 ,因为 内 部 的 算法 只 有 开发 人 员 自 己 才 清 
楚 ,而 且 发 现 错误 或 缺陷 时 开发 人 员 最 容易 知道 如 何 解决 。 由 于 测试 的 工作 量 巨大 ,合理 安排 
好 测试 和 修正 缺陷 的 时 间 比 例 非 常 关键 ,否则 很 容易 出 现 发 现 了 缺陷 却 没有 时 间 改 正 或 者 缺 
陷 堆 在 一 起 无 法 解决 的 矛盾 。 测 试 设计 应 当 在 开发 的 设计 阶段 就 要 完成 ,如 果 开 发 初期 没有 
安排 合理 的 测试 时 间 ,那么 对 测试 的 结果 、 开 发 的 进程 甚至 游戏 软件 的 质量 等 方面 都 会 受到 
影响 。 

游戏 测试 也 分 为 单元 测试 .集成 测试 .系统 测试 ,验收 测试 等 阶段 ,由 于 游戏 软件 的 不 同 ， 
可 以 对 这 些 测 试 阶段 本 身 和 测试 的 详细 程度 进行 裁剪 。 

游戏 软件 的 分 析 和 设计 阶段 是 做 测试 用 例 设 计 的 最 好 时 机 。 根 据 游戏 软件 开发 的 不 同 阶 
段 制 定 测试 计划 并 进行 测试 的 设计 ,不 能 在 开始 执行 测试 之 前 才 开始 制定 测试 计划 和 设计 测 
试用 例 。 在 这 种 情况 下 ,测试 往往 只 是 验证 了 程序 的 正确 性 ,而 不 能 验证 整个 系统 是 否 满足 需 
求 。 在 游戏 系统 中 一 般 是 用 UML 状态 图 进行 系统 状态 的 详细 描述 ,比如 用 户 登录 情况 的 时 
序 图 ,如 图 9-23 所 示 。 
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9-23 ”用 户 登 录 情况 时 序 图 


游戏 系统 开发 中 的 UML 的 用 例 图 、 时 序 图 和 状态 图 是 用 来 设计 测试 用 例 的 重要 依据 。 
如 果 用 例 图 和 时 序 图 是 从 系统 的 级 别 上 描述 了 系统 的 交互 场景 ,那么 用 例 图 和 时 序 图 是 从 系 
统 的 游戏 场景 角度 设计 测试 用 例 的 最 好 依据 。 时 序 图 可 以 用 来 设计 系统 不 同 部 分 之 间 交 互 的 
测试 用 例 ,例如 ,图 9-23 中 描述 的 一 个 用 户 登录 游戏 系统 的 时 序 图 应 该 包括 成 功 登录 和 不 成 
功 登 录 的 情况 ,而 不 成 功 登 录 的 情况 又 可 能 包含 密码 错误 、 通 信和 错误 等 多 种 情况 ,这 些 情 况 应 
该 均 对 应 不 同 的 时 序 图 。 这 些 时 序 图 均 对 应 游戏 系统 的 一 个 功能 的 不 同 测试 点 ,每 个 测试 点 
对 应 一 个 测试 用 例 。 通 过 测试 登录 功能 ,可 以 很 明确 地 了 解 玩家 是 如 何 验 证 并 登录 游戏 系统 
的 ,在 这 个 过 程 中 要 与 哪些 对 象 进行 交互 ,比如 这 是 3 个 部 分 之 间 的 交互 : 客户 端 (玩家 部 
分 )、 网 关 、 账 号 服务 之 间 的 时 序 变化 关系 。 为 了 能 够 完整 地 对 这 个 流程 进行 测试 ,必须 设计 出 
可 以 覆盖 整个 流程 的 测试 用 例 ,并 考虑 其 中 可 能 的 非法 情况 ,因为 这 个 时 序 图 只 是 考虑 了 用 户 
正常 登录 成 功 的 情况 ,并 没有 考虑 密码 错误 ,通信 失败 等 许多 其 他 可 能 的 情况 ,并 形成 完整 的 
测试 用 例 库 , 这 些 用 例 的 设计 均 以 时 序 图 为 重要 的 参考 依据 。 同 时 通过 时 序 图 ,性 能 分 析 人 员 
还 可 以 分 析出 可 能 存在 的 性 能 瓶颈 ,比如 这 个 例子 可 能 存在 的 瓶颈 是 总 网 关 可 以 容纳 多 少 用 
户 并 发 ,如 果 达 不 到 ,是 否 可 以 采用 分 布 式 部 署 或 是 支持 负载 平衡 ,三 者 之 间 的 网 络 带宽 的 比 
例 分 配 ,账号 服务 器 是 否 可 以 承载 多 个 网 关 的 连接 请 求 , 最 大 连接 请 求 可 以 达到 多 少 等 。 可 以 
针对 这 些 风险 做 性 能 测试 的 设计 ,并 提出 自动 化 测试 的 需求 ,比如 用 压力 测试 工具 模拟 玩家 登 
录 游 戏 系统 的 测试 等 。 

上 面 所 描述 的 是 对 游戏 程序 本 身 的 测试 设计 ,而 对 于 游戏 情节 的 测试 则 可 以 从 系统 策划 
中 获得 。 由 于 在 前 期 的 游戏 策划 阶段 只 是 对 游戏 情节 大 方向 上 的 描述 ,并 没有 针对 某 一 个 具 
体 的 情节 进行 设计 ,进入 设计 阶段 时 , 某 个 游戏 功能 和 情节 他 辑 已 经 完整 地 形成 了 ,策划 可 以 
给 出 功能 和 情节 的 详细 设计 说 明 书 , 称 为 详细 任务 (功能 ) 和 情节 说 明 书 。 通 过 详细 任务 和 情 
节 说 明 书 可 以 设计 出 任务 (功能 ) 和 情节 测试 用 例 ,比如 某 一 个 门派 的 任务 由 哪些 任务 组 成 。 
可 以 设计 出 完整 的 任务 测试 用 例 , 从 而 保证 测试 可 能 最 大 化 地 覆盖 到 所 有 的 任务 逻辑 。 如 果 
是 简单 任务 ,还 可 以 提出 自动 化 需求 ,采用 自动 化 工具 完成 。 这 些 任务 能 构成 多 少 不 同 的 情 
节 ? 分 析 这 些 情节 并 需要 设计 测试 用 例 保 证 所 有 的 情节 被 覆盖 。 某 种 程度 上 ,可 以 理解 任务 
测试 和 情节 测试 对 应 为 游戏 测试 的 单元 测试 和 集成 测试 。 

游戏 系统 测试 阶段 是 对 整个 系统 的 测试 。 由 于 前 期 测试 与 开发 的 并 行 , 集 成 测试 已 经 基 
本 完成 ,系统 测试 的 测试 用 例 可 以 对 前 期 的 测试 用 例 进行 整理 优化 ,得 到 能 覆盖 全 部 业务 流 的 
用 例 集 就 可 以 了 。 同 时 ,系统 级 别 的 测试 要 考虑 业务 功能 之 外 的 非 功 能 性 特性 测试 ,如 兼容 性 
测试 ,由 于 游戏 测试 的 特殊 性 ,对 兼容 性 的 要 求 特别 高 ,所 以 采用 了 外 部 与 内 部 同步 进行 的 方 
式 , 内 部 有 自己 的 平台 试验 室 ,搭建 主流 的 硬 软件 测试 环境 ,同时 还 通过 一 些 专业 的 兼容 性 测 
试 机 构 对 游戏 软件 做 兼容 性 分 析 ,让 游戏 软件 可 以 运行 在 更 多 的 机 器 上 。 

游戏 的 系统 级 别 的 测试 主要 通过 功能 测试 ( 黑 盒 测 试 ) 来 实施 ,其 中 场景 法 在 系统 级 别 的 
测试 中 非常 有 用 。 场 景 测 试 能 有 效 暴 露出 产品 设计 上 的 缺陷 。 需 求 是 抽象 的 ,有 时 只 有 在 实 
际 的 运行 过 程 中 才能 暴露 出 问题 。 这 个 实际 的 运行 过 程 就 是 场景 测试 。 所 以 ,场景 测试 能 有 
效 地 提升 游戏 的 品质 ,也 是 游戏 系统 级 别 测试 的 主要 测试 方法 ,尤其 应 用 在 游戏 软件 的 系统 测 
试 上 。 

创建 游戏 场景 的 方法 : 

(1) 基于 功能 分 析出 游戏 系统 中 对 象 生命 历程 。 

(2) 列 出 可 能 的 玩家 群体 ,分 析 他 们 的 兴趣 和 目标 。 


(3) 考虑 恶意 玩家 ,他 们 可 能 怎么 攻击 你 的 游戏 ,怎么 利用 现 有 规则 。 

(4) 列 出 系统 事件 ,考察 系统 怎么 处 理 这 些 事件 。 

(5) 列 出 特殊 事件 ,考察 系统 怎么 容纳 这 些 事件 。 

(6) 列 出 收益 并 创建 端 到 端的 任务 来 检查 他 们 。 

(7) 与 玩家 沟通 , 找 出 原 有 功能 或 系统 中 他 们 最 不 满意 的 地 方 。 

(8) 与 玩家 一 起 参与 ,观察 他 们 是 怎么 玩 游 戏 的 ,经 常 做 些 什么 。 

(9) 参考 本 游戏 中 类 似 的 系统 会 做 什么 。 

(10) 研究 对 本 游戏 系统 以 前 版 本 和 竞争 对 手 的 不 足 。 

(11) 创建 模拟 的 外 网 玩家 群体 (可 使 用 随机 导入 外 网 账号 的 方式 ) ,使 用 这 个 模拟 玩家 群 
体 , 模 拟 外 网 真实 情况 。 

一 个 完美 的 场景 测试 应 包含 几 个 特征 : 

。 一 个 基于 真实 玩家 怎么 玩 游戏 的 场景 ,包括 玩家 的 动机 。 

。 场景 具有 感染 力 , 有 影响 力 的 干系 人 会 促使 让 这 个 场景 测试 失败 的 原因 得 到 修复 。 

。 场景 要 可 信和 ,不 仅 在 真实 的 世界 中 可 能 发 生 , 而 且 将 很 可 能 发 生 。 

。 场景 包含 对 游戏 的 复杂 的 操作 ,或 者 复杂 的 环境 或 一 套 复杂 的 数据 。 

。 测试 结果 容易 评估 。 

具体 的 场景 法 的 用 例 设计 过 程 见 第 3 章 。 

另外 ,建议 在 游戏 的 开发 和 设计 评审 时 ,测试 人 员 , 尤 其 是 资深 的 测试 人 员 参 加 。 他 们 的 
介入 可 以 充分 地 对 当前 的 系统 构架 发 表 自己 的 意见 ,因为 测试 人 员 的 眼光 是 最 苛刻 的 ,并 且 他 
们 有 多 年 的 测试 经 验 , 可 以 比较 早 地 发 现 曾经 出 现 的 在 分 析 和 设计 上 的 问题 ,比如 在 玩家 转换 
服务 器 时 是 否 做 了 事务 的 支持 与 数据 的 校 验 。 在 过 去 分 析 和 设计 中 由 于 没有 事务 支持 与 数据 
的 校 验 , 从 而 导致 玩家 数据 丢失 ,而 这 些 缺 陷 在 早期 的 游戏 系统 中 很 难 发 现 并 消除 。 

3. 游戏 性 能 测试 

对 于 游戏 的 性 能 测试 ,在 单机 版 的 时 代 , 性 能 的 要 求 并 不 是 很 高 ,但 是 在 网 络 版 的 时 代 , 则 
是 两 个 完全 不 同 的 概念 。 性 能 主要 涉及 以 下 几 个 方面 : 应 用 在 客户 端 性 能 的 测试 .应 用 在 网 
络 上 性 能 的 测试 和 应 用 在 服务 器 端 性 能 的 测试 。 通 常情 况 下 ,前 面 三 个 方面 有 效 、 合 理 地 结合 
可 以 达到 对 系统 性 能 全 面 的 分 析 和 瓶颈 的 预测 。 不 过 在 测试 过 程 中 有 这 样 一 个 原则 ,就 是 由 
于 性 能 测试 一 般 是 在 系统 集成 测试 完成 或 接近 完成 时 进行 ,要 求 游戏 系统 的 功能 .情节 和 场景 
能 够 走 通 , 这 时 性 能 的 优化 首先 要 考虑 优化 的 是 数据 库 或 是 网 络 本 身 的 配制 ,只 有 这 样 才 可 以 
规避 改动 程序 的 风险 。 同 时 性 能 的 测试 与 优化 是 一 个 逐步 完善 的 过 程 ,需要 在 前 期 做 很 多 工 
作 , 比 如 性 能 需求 .开发 过 程 性 能 监控 ,测试 工具 等 ,这 些 工作 在 测试 计划 中 应 该 有 详细 描述 。 

网 络 游 戏 行业 现在 越 做 越 大 , 面 也 越 来 越 广 ,但 是 网 络 游戏 的 构架 主要 包括 如 下 3 种 ,性 
能 测试 如 何 实施 ? 

(1) 传统 的 C/S 架构 的 网 络 游戏 。 

这 种 网 络 游戏 历史 最 悠久 ,也 是 目前 仍然 在 流行 的 网 络 游戏 类 型 。 这 类 游戏 需要 用 户 下 
载 客户 端 ,然后 通过 客户 端 来 访问 服务 器 进行 登录 和 游戏 。 这 类 游戏 的 性 能 测试 方法 大 体 有 
3 种: 

O@ 目前 较 常规 的 做 法 就 是 自主 研发 一 个 机 器 人 程序 ,模拟 玩家 登录 与 游戏 。 这 种 方法 的 
好 处 : 一 是 操作 方便 ,对 执行 性 能 测试 的 人 员 无 要 求 ; 二 是 能 够 较真 实地 模拟 出 玩家 的 部 分 
操作 。 但 是 缺点 也 不 少 ,如 对 开发 人 员 要 求 较 高 ,因为 不 仅 需 要 模拟 用 户 访问 服务 器 ,还 需要 


收集 多 种 数据 ,并 且 将 数据 进行 实时 计算 等 ,成 本 较 大 ,而 且 也 不 易 维护 。 除 此 之 外 ,机 器 人 发 
生 问题 的 时 候 , 维 护 起 来 也 不 够 方便 。 在 复杂 架构 下 不 利于 判断 瓶颈 所 在 位 置 。 最 重要 的 是 
一 旦 机 器 人 开发 进度 推迟 或 者 出 现 致 命 缺 陷 , 性 能 测试 将 无 法 进行 。 

@ 使 用 现成 的 性 能 测试 工具 进行 性 能 测试 。 可 以 使 用 工具 来 模拟 用 户 端 与 服务 器 交互 
的 底层 协议 来 进行 测试 。 这 种 方法 的 优点 是 灵活 方便 .易于 维护 ,开发 成 本 小 。 增 加 删除 性 能 
点 比较 容易 ,发 生 问题 也 能 立即 维护 。 开 发 成 本 相对 于 机 器 人 来 说 减少 很 多 ,并 可 以 较 容易 地 
判断 性 能 瓶颈 所 在 的 位 置 。 这 种 方式 的 缺点 也 有 不 少 , 如 对 性 能 测试 人 员 的 要 求 比较 高 ,需要 
根据 用 例 来 编写 模拟 用 户 端 与 服务 器 之 间 的 协议 交互 脚本 。 对 于 模拟 真实 性 方面 也 比 机 器 人 
程序 差 。 

@ 使 用 最 广泛 且 与 上 面 两 条 不 冲突 , 那 就 是 进行 封 测 、 内 测 、 公 测 等 开放 性 测试 方法 。 这 
种 方法 是 最 真实 的 。 让 广大 的 玩家 在 测试 服务 器 中 进行 游戏 ,帮助 游戏 公司 找到 游戏 中 缺陷 
的 同时 ,也 对 服务 器 的 性 能 进行 了 真实 的 测试 。 

(2) B/S 架构 的 网 络 游戏 。 

B/S 架构 的 网 游 现在 最 为 流行 ,现在 越 来 越 多 的 人 喜欢 这 种 类 型 的 网 游 。 它 可 能 没有 传 
统 的 C/S 架构 的 网 游 那 种 炫目 的 效果 ,唯美 的 画面 ,也 没有 传统 网 游 那 种 直观 的 人 物 动作 ,但 
是 却 吸引 了 越 来 越 多 的 上 班 族 去 玩 它 。 同 时 , 随 着 技术 的 发 展 , 这 种 架构 会 越 来 越 成 熟 ,效果 
会 越 来 越 好 。 因 为 它 具 有 传统 的 C/S 架构 的 网 游 所 没有 的 优势 , 那 就 是 方便 ,简单 。 只 要 可 
以 上 网 ,只 要 有 浏览 器 ,就 可 以 进行 游戏 。 无 须 下载 客 户 端 , 无 须 担心 机 器 配置 不 够 ,也 无 须 长 
时 间 地 去 投入 ,就 可 以 享受 到 网 游 的 乐趣 。 

这 类 游戏 的 性 能 测试 方法 大 体 有 两 种 : 

QO@ 使 用 工具 来 模拟 用 户 访 问 , 这 个 和 其 他 的 B/S 架构 的 软件 产品 一 样 。 通 过 各 种 工具 ， 
各 种 协议 来 模拟 用 户 访问 服务 器 ,与 服务 器 进行 交互 。 

@ 和 传统 的 C/S 架构 的 网 游 一 样 , 它 也 采用 封 测 、 内 测 、 公 测 等 测试 活动 ,让 广大 的 玩家 
为 游戏 系统 进行 性 能 方面 的 测试 。 

(3) 缺陷 网 络 游戏 。 

缺陷 网 游 现 在 也 是 越 来 越 多 了 。 这 类 游戏 的 性 能 测试 方法 大 体 有 两 种 : 

QO 使 用 模拟 器 在 计算 机 上 模拟 缺陷 环境 ,然后 使 用 工具 来 进行 性 能 测试 。 使 用 的 协议 可 
以 是 缺陷 ,也 可 以 是 缺陷 等 其 他 协议 。 

@ 与 其 他 两 种 网 游 一 样 , 在 开发 过 程 中 进行 必要 的 性 能 监控 和 性 能 测试 。 

4. 用 例 执行 和 测试 报告 

游戏 测试 用 例 的 模板 和 其 他 的 软件 测试 模板 没有 本 质 区 别 , 其 测试 用 例 项 可 以 根据 实际 
情况 作 删 减 。 用 例 的 执行 主要 记录 执行 结果 、 测 试 时间 问题 描述 ,版 本 号 等 信息 。 游 戏 测试 
的 执行 和 其 他 系统 的 测试 基本 相同 ,这 里 不 再 歼 述 。 

测试 报告 的 格式 模板 不 同 , 企 业 也 不 尽 相 同 , 下 表 是 其 中 的 一 种 游戏 测试 报告 格式 模板 ， 
供 参 考 。 


XXX 测试 报告 
1. 测试 版 本 
所 测试 的 游戏 的 版 本 号 ,例如 V1. 0( 封 测 版 本 ) 等 。 


2. 测试 平台 
本 次 测试 ,硬件 和 操作 系统 情况 : 


项 目 


验 


CPU 


内 存 


显卡 


硬盘 空间 


操作 系统 版 本 


DirectX 版 本 


3. 产品 评测 
(1) 系统 配置 要 求 ( 软 件 , 硬 件 ) 


项 目 


最 低 配 置 


建议 配置 


硬盘 空间 


操作 系统 版 本 


(2) 画面 总 体 印象 


项 目 


画面 类 型 


视觉 类 型 


画面 风格 


场景 画面 


角色 造型 


角色 动作 


角色 与 场景 的 协调 性 


整体 印象 


(3) 用 户 操作 


项 目 


操作 方式 


流畅 度 


热 键 设 定 


用 户 上 手 难 度 


音乐 种 类 


音乐 与 场景 的 协调 性 


音乐 文件 的 支持 格式 


(6) 音效 


项 目 内 容 


音效 种 类 


音效 与 操作 的 协调 性 


音效 文件 的 支持 格式 


4. 基本 功能 测试 
(1) 用 户 界面 
登录 界面 详细 评测 ,结构 、 色 彩 、 布 局、 使 用 习惯 ,整体 印象 音乐 等 方面 都 要 涉及 。 


登录 步骤 ， 
@ 打开 客户 端 …… 


此 项 也 是 截图 加 文字 的 表述 方式 。 

(2) 背景 故事 

(3) 角色 

@ 职业 。 

本 产品 共有 多 少 个 角色 ,请 列 出 ,并 加 上 游戏 本 身 的 说 明 或 者 你 自己 的 看 法 ,请 注意 区 分 标识 。 


@ 角色 成 长 。 


请 按照 评测 的 基本 流程 , 写 下 本 角色 成 长 的 认识 和 理解 ,有 条 件 可 标注 曲线 图 。 


@ 角色 能 力 值 和 升级 。 
举例 如 下 : 
基本 能 力 值 (Status) : 


， 力 气 : 
。 技 巧 ; 
。 体力: 
。 智力: 
， 敏 捷 : 


决定 角色 的 物理 性 攻击 力 。 

决定 角色 命中 率 和 速度 。 

决定 角色 生命 力 的 外 功 和 防御 的 高 低 。 
决定 着 角色 精神 攻击 力 与 内 功 的 高 低 。 
影响 着 角色 的 移动 速度 ,攻击 速度 及 躲闪 。 


附加 能 力 值 : 


@ 外 功 : 
@ 内 功 : 
@ 活力 : 


生命 。 
使 用 特殊 攻击 /防御 时 消耗 的 数值 。 
使 用 轻功 或 特殊 武功 时 消耗 的 数值 


依据 升级 的 补偿 : 


升级 时 以 补偿 获得 ,可 升级 一 次 能 力 值 的 能 力 值 分 数 和 修炼 武功 所 必要 的 武功 分 数 。 人 物 角色 的 升 
级 ,可 有 三 个 奖励 点 数 供 玩家 自行 分 配 , 以 鼓励 玩家 根据 自己 的 喜好 , 锻 就 出 带 有 鲜明 特点 的 角色 。 
(4) 战斗 


项 目 测试 结果 


攻击 的 距离 是 否 正 常 


角色 攻击 怪物 是 否 存 在 不 损 血 的 情况 


怪物 在 屏幕 上 显示 是 否 正常 


怪物 的 刷新 速度 是 否 过 慢 或 过 快 


怪物 的 人 工 智能 是 否 合理 


怪物 的 等 级 与 地 图 上 的 摆 放 位 置 是 否 合理 


(5) 技能 


请 讲解 技能 学 习 的 方式 和 方法 。 
Q@ 技能 的 种 类 。 

。 共同 技能 。 

所 有 的 职业 都 有 的 技能 。 

。 专 有 技能 。 

各 个 职业 专 有 的 技能 。 

@ 技能 的 学 习 。 


满足 固定 条 件 ( 功 力 、 能 力 值 ) 后 , 去 书店 买书 来 学 习 , 学 习 了 的 技能 就 可 以 继续 使 用 。 


@ 使 用 技能 。 


先 打开 技能 窗口 ,拖拉 想 要 用 的 技能 图 表 放 在 快捷 键 窗口 上 ,战斗 时 按 快 捷 键 的 号 码 ,就 使 用 该 技能 。 
(6) 道具 
道具 种 类 丰富 ,从 每 种 职业 内 部 按照 武器 不 同 的 区 别 , 以 及 各 种 职业 丰富 的 独特 的 防具 ,大 大 增加 了 


游戏 物品 的 数量 及 种 类 。 
其 中 初期 的 大 部 分 商品 可 以 直接 由 商店 购买 获得 。 


道具 种 类 


道具 功能 


功能 解释 是 否 清 楚 


使 用 要 求 


其 他 : 

(7) 任务 

(8) 聊天 

(9) PK、PVP 及 比武 大 赛 
(10) 交易 

(11) 人 物 表 情 动作 

(12) 怪物 

5. 游戏 特色 


(2) … 


6. 游戏 BUG 测试 
(1) 游戏 系统 测试 
(2) 输入 法 测试 
(3) 地 图 测试 

(4) 图 形 测试 

7. 游戏 扩充 性 评估 


(1) 例如 ,高 自由 度 的 自我 个 性 化 角色 。 
装饰 物 强化 角色 的 人 物化 身 性 ,因此 不 仅 是 外 形 上 的 差异 ,有 个 性 的 角色 成 长 也 将 是 可 能 的 。 


项 目 


评估 结果 


角色 扩充 性 


地 图 扩充 性 


玩法 多 样 化 


任务 扩充 性 


后 续 开 发 计划 


8. 游戏 稳定 性 


宕 机 类 型 


宕 机 数量 


出 现 错误 提示 框 , 跳 回 Windows 


测试 期 间 一 共 发 生 0 次 


无 故 花屏 ,并 跳 回 Windows 


测试 期 间 一 共 发 生 0 次 


服务 器 无 故 关闭 (不 包括 提示 后 退出 的 ) 


测试 期 间 一 共 发 生 0 次 


同时 测试 阶段 游戏 连接 速度 快 , 受 网 络 因素 拖 动 的 现象 较 少 。 
9. 硬件 测试 
(1) 硬件 系统 兼容 性 测试 


项 目 运行 情况 
Microsoft Windows XP 可 
Microsoft Win Vista 可 
Microsoft Windows 2008 可 
Microsoft Windows 7 可 

(2) 显卡 硬件 测试 
项 目 运行 情况 
GF-2 MX/MX400 可 
Voodoo3 否 
Rage 1281[ Pro 可 
TNT2 否 


10. 游戏 的 不 足 与 国内 现状 分 析 
11. 游戏 综合 总 结 


练习 


. 简 述 GUI 测试 的 主要 内 容 和 原则 。 

. 分 析 Web 应 用 测试 的 特殊 性 。 

. 简 述 Web 应 用 的 表单 测试 和 Cookies 测试 并 用 一 个 实际 项 目 进行 测试 实践 。 
. 分 析 数 据 库 测试 的 重点 。 

. 简 述 数据 库 性 能 测试 的 关注 点 。 

。. 如何 进行 数据 库 的 可 靠 性 和 安全 性 测试 ? 举例 说 明 。 

. 简 述 嵌入 式 测试 环境 的 搭建 。 

.比较 嵌入 式 系统 的 测试 级 别 和 通用 系统 测试 级 别 的 不 同 。 
. 解释 负载 测试 .压力 测试 和 性 能 测试 。 

10. 分 析 负 载 压力 测试 的 关注 点 并 举例 说 明 。 

11. 系统 性 能 调 优 主要 考虑 哪些 方面 ? 举例 说 明 。 

12. 简 述 游戏 测试 所 具有 的 特点 。 

13. 简 述 游戏 测试 的 主要 内 容 。 


coo 站 口上 上 - 
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CHAPTER 10 


第 10 章 
软件 测试 管理 


在 第 1 章 中 介绍 了 软件 测试 的 基本 过 程 ,这 个 过 程 包括 软件 测试 计 
划 ,测试 分 析 和 设计 ,测试 实施 .执行 和 监控 ,测试 报告 及 测试 结束 活动 
等 方面 。 软 件 测试 管理 主要 是 基于 对 软件 测试 过 程 进行 管理 。 


10.1 测试 计划 的 制定 与 估算 


软件 测试 计划 是 成 功 地 进行 一 个 软件 测试 项 目的 前 提 和 基础。 所 
以 在 进行 软件 测试 之 前 ,应 制定 合理 的 .切实 可 行 的 测试 计划 并 严格 执 
行 ,特别 要 确定 测试 策略 和 目标 。 

软件 测试 计划 可 以 划分 为 项 目的 总 体 测 试 计划 、 单 元 测试 计划 、 集 
成 测试 计划 、 系 统 测试 计划 等 ,甚至 可 以 有 性 能 测试 计划 功能 测试 计划 
等 。 需 要 什么 类 型 的 测试 计划 根据 测试 项 目的 实际 情况 而 定 , 但 一 般 这 
些 不 同类 型 的 测试 计划 应 该 在 项 目的 总 体 测试 计划 的 框架 下 制定 。 

测试 计划 与 软件 开发 活动 同步 进行 。 在 需求 分 析 阶 段 , 要 完成 验收 
测试 计划 ,并 与 需求 规格 说 明 一 起 提交 评审 。 在 概要 设计 阶段 ,要 完成 
和 评审 系统 测试 计划 。 在 详细 设计 阶段 ,要 完成 和 评审 集成 测试 计划 。 
在 编码 实现 阶段 ,要 完成 和 评审 单元 测试 计划 。 对 于 测试 计划 的 修订 部 
分 ,需求 进行 重新 评审 。 测试 计划 中 包含 的 主要 内 容 有 : 明确 要 完成 的 
测试 活动 ,评估 完成 活动 所 需 时 间 和 资源 ,测试 组 织 和 岗位 职权 ,进行 活 
动 安排 和 资源 分 配 , 安 排 跟 踪 和 控制 测试 过 程 的 活动 ,制定 测试 策略 , 确 
定 测试 范围 ,测试 目的 、 测 试 方法 、 回 归 测 试 的 技术 要 求 ,测试 通过 /失败 
的 标准 ,测试 终止 准则 ,进行 测试 结果 分 析 和 度量 以 及 测试 风险 评估 ,对 
测试 过 程 的 质量 保证 和 配置 管理 工作 进行 明确 规定 ,应 交付 的 测试 工作 
产品 等 。 

一 个 通用 的 软件 测试 计划 应 该 是 描述 测试 目的 ,范围 .方法 和 软件 
测试 的 重点 等 的 文档 。 对 于 验证 软件 产品 的 可 接受 程度 编写 测试 计划 
文档 是 一 种 有 用 的 方式 。 软 件 测试 计划 作为 软件 项 目 计 划 的 子 计划 ,在 
项 目 启动 初期 必须 制定 ,尤其 是 总 体 测 试 计划 。 在 软件 开发 中 ,软件 质 
量 日 益 受到 重视 ,测试 过 程 也 从 一 个 相对 独立 的 步骤 越 来 越 紧密 地 其 套 
在 软件 整个 生命 周期 中 ,这 样 , 如 何 规划 整个 项 目 周 期 的 测试 工作 ,如 何 


将 测试 工作 上 升 到 测试 管理 的 高 度 都 依赖 于 测试 计划 的 制定 。 测 试 计划 因此 也 成 为 测试 工作 
赖 于 展开 的 基础 。《ANSI/ITEEE 软件 测试 文档 标准 829 一 1983) 将 测试 计划 定义 为 :“ 一 个 叙 
述 了 预定 的 测试 活动 的 范围 .途径 .资源 及 进度 安排 的 文档 。 它 确认 了 测试 项 、 被 测 特征 、 测 试 
任务 、 人 员 安 排 ,以 及 任何 偶发 事件 的 风险 .” 软 件 测试 计划 是 指导 测试 过 程 的 纲领 性 文件 , 包 
含 了 产品 概述 、 测 试 策 略 、 测 试 方法 ,测试 区 域 测试 配置 测试 周期 ,测试 资源 ,测试 交流 、 风 险 
分 析 等 内 容 。 借 助 软件 测试 计划 ,参与 测试 的 项 目 成 员 , 尤 其 是 测试 管理 人 员 , 可 以 明确 测试 
任务 和 测试 方法 ,保持 测试 实施 过 程 的 顺畅 沟通 ,跟踪 和 控制 测试 进度 ,应 对 测试 过 程 中 的 各 
种 变更 。 编 写 软件 测试 计划 的 重要 目的 就 是 使 测试 过 程 有 章 可 循 、 可 控 , 并 能 够 发 现 更 多 的 软 
件 缺 陷 , 因 此 软件 测试 计划 的 重要 价值 在 于 帮助 软件 测试 管理 。 一 个 好 的 测试 计划 应 该 体现 
在 以 下 方面 : 

(1) 测试 计划 目标 明确 。 当 今 任何 商业 软件 都 包含 了 丰富 的 功能 ,因此 ,软件 测试 的 内 容 
千 头 万 绪 ,如 何在 纷乱 的 测试 内 容 之 间 提 炼 测 试 的 目标 是 制定 软件 测试 计划 时 首先 需要 明确 
的 问题 。 测 试 目 标 必 须 是 明确 的 ,可 以 量化 和 度量 的 ,而 不 是 模棱两可 的 宏观 描述 。 另 外 , 测 
试 目标 应 该 相对 集中 ,避免 罗列 出 一 系列 目标 ,从 而 轻重 不 分 或 平均 用 力 。 通 过 对 用 户 需 求 文 
档 、 需 求 分 析 文档 及 各 种 设计 规格 文档 的 分 析 , 确 定 被 测 软件 的 质量 要 求 和 测试 需要 达到 的 
目标 。 

(2) 测试 计划 作用 明确 。 一 个 好 的 测试 计划 可 以 起 到 避免 测试 的 “事件 驱动 ”; 使 测试 工 
作 和 整个 开发 工作 融合 起 来 ; 资源 和 变更 事先 作为 一 个 可 控制 的 风险 。 

(3) 测试 计划 模板 清晰 。 依 据 特 定 的 项 目 ,在 一 个 测试 计划 中 可 能 包括 下 面 项 : 

。 标题 ; 

。 软件 标识 ,包括 版 本 /发 布 版 本 号 ; 

。 目录; 

。 文 档 的 目的 和 阅读 人 群 ; 

。 测试 的 对 象 ; 

。 软件 产品 概述 ; 

。 相关 文档 列表 ,例如 需求 规格 .设计 文档 和 其 他 测试 计划 等 ; 

。 有 关 的 标准 和 法 规 ; 

。 可 追溯 的 需求 ; 

。 有 关 的 命名 约定 和 标识 约定 ; 

。 软件 项 目 相 关 的 所 有 部 门 和 成 员 / 联 系 信息 /职责 ; 

。 测试 项 目 组 和 人 员 / 联 系 信息 /职责 ; 

。 假设 和 依赖 ; 

。 项 目 风 险 分 析 ; 

。 测试 优先 级 和 重点 ; 

。 范围 和 测试 限制 ; 

。 测试 描述 一 一 根据 测试 类 型 特征 、 功 能、 过 程 、 系 统 、 模 块 等 分 类 ; 

。 输入 等 价 类 分 类 描述 、 边 界 值 分 析 、 错 误 等 分 类 ; 
测试 环境 一 一 软 硬 件 .操作 系统 .其 他 需要 的 软件 .数据 配置 .与 其 他 系统 的 接口 ; 
测试 环境 有 效 性 分 析 一 一 测试 环境 的 不 同和 产品 系统 对 测试 有 效 性 的 影响 ; 
测试 环境 建立 和 配置 问题 ; 


软件 移植 性 考虑 ; 

。 软件 配置 管理 过 程 ; 

。 测试 数据 建立 需求 ; 

。 系统 日 志 描 述 /错误 日 志 / 其 他 的 能 力 和 工具 ,例如 屏幕 捕获 工具 ,这 对 于 描述 bug 和 
报告 bug 是 很 有 用 的 ; 

。 讨论 任何 测试 人 员 用 来 发 现 bug 或 跟踪 bug 的 硬件 .软件 工具 ; 

。 测试 自动 化 一 一 采用 的 理由 和 描述 ; 

。 采用 的 测试 工具 ,包括 版 本 、 补 丁 等 ; 

。 测试 脚本 /测试 代码 维护 过 程 和 版 本 控制 ; 

。 跟踪 和 解决 一 一 工具 和 步骤 ; 

。 用 于 项 目的 测试 度量 标准 ; 

。 报告 需求 和 测试 交付 产品 ; 

。 软件 入 口 和 出 口 标准 ; 

。 初期 确定 的 测试 周期 和 标准 ; 

。 测试 暂停 和 重启 标准 ; 

。 人 员 分 配 ; 

。 人 员 岗 前 培训 ; 

。 测试 地 点 /场所 ; 

测试 项 目 组 之 外 可 用 的 资源 和 它们 的 作用 、 职 责 、 交 付 、 联 系 人 和 协调 等 问题 ; 

与 所 有 权 相 关 的 级 别 、 分 类 ,安全 和 许可 问题 ; 

。 公开 的 一 些 问题 。 

(4) 计划 内 容 篇 幅 适 当 。 编 写 软件 测试 计划 要 避免 一 种 不 良 倾向 一 一 测试 计划 的 “大 而 
全 ”, 无 所 不 包 , 篇 幅 宛 长 ,长篇大论 ,重点 不 突出 , 既 浪费 写作 时 间 , 也 浪费 测试 人 员 的 阅读 时 
间 。“ 大 而 全 ”的 一 个 常见 表现 就 是 测试 计划 文档 包含 详细 的 测试 技术 指标 、 测 试 步骤 和 测试 
用 例 。 最 好 的 方法 是 把 详细 的 测试 技术 指标 包含 到 独立 创建 的 详细 的 测试 规格 文档 中 ,把 用 
于 指导 测试 小 组 执行 测试 过 程 的 测试 用 例 放 到 独立 创建 的 测试 用 例文 档 或 测试 用 例 管理 数据 
库 中 。 测 试 计划 和 测试 详细 规格 ,测试 用 例 之 间 是 战略 和 战术 的 关系 ,测试 计划 主要 从 宏观 上 
规划 测试 活动 的 范围 .方法 和 资源 配置 .而 测试 详细 规格 、 测 试用 例 是 完成 测试 任务 的 具体 
战术 。 

(5) 5W 规则 。5W 规则 指 的 是 What( 做 什么 )、Why( 为 什么 做 )、When( 何 时 做 )、Where 
(在 哪里 ) 和 How( 如 何 做 )。 利 用 “5W” 规 则 创建 软件 测试 计划 ,可 以 帮助 测试 团队 理解 测试 
的 目的 (Why) ,明确 测试 的 范围 和 内 容 (What) ,确定 测试 的 开始 和 结束 日 期 (When) ,指出 测 
试 的 方法 和 工具 (How) ,给 出 测试 文档 和 软件 的 存放 位 置 (Where)。 为 了 使 “5W” 规 则 更 具体 
化 ,需要 准确 理解 被 测 软 件 的 功能 、 非 功能 特征 、 应 用 行业 的 业务 知识 和 使 用 的 软件 测试 技术 ， 
在 需要 测试 的 内 容 中 突出 关键 部 分 ,可 以 列 出 关键 及 风险 内 容 、 属 性 ,场景 或 者 测试 技术 。 对 
测试 过 程 的 阶段 划分 文档 管理 缺陷 管理 ,进度 管理 给 出 切实 可 行 的 方案 。 

(6) 测试 计划 的 评审 和 调整 机 制 。 测 试 计划 写作 完成 后 ,如 果 没 有 经 过 评审 ,直接 发 送 给 
测试 团队 ,测试 计划 内 容 可 能 不 准确 或 遗漏 测试 内 容 , 或 者 软件 需求 变更 引起 测试 范围 的 增 
减 ,而 测试 计划 的 内 容 没有 及 时 更 新 ,误导 测试 执行 人 员 。 测 试 计划 包含 多 方面 的 内 容 ,编写 
人 员 可 能 受 自身 测试 经 验 和 对 软件 需求 的 理解 所 限 ,而 且 软 件 开发 是 一 个 渐进 的 过 程 ,所 以 最 


初创 建 的 测试 计划 可 能 是 不 完善 的 .需要 更 新 的 。 需 要 采取 相应 的 评审 机 制 对 测试 计划 的 完 
整 性 、 正 确 性 ` 可 行 性 进行 评估 。 例 如 ,在 创建 完 测试 计划 后 ,提交 到 由 项 目 经 理 ` 开 发 经 理 、 测 
试 经 理 、 市 场 经 理 等 组 成 的 评审 委员 会 审阅 ,根据 审阅 意见 和 建议 进行 修正 和 更 新 。 为 使 测试 
计划 得 到 贯彻 和 落实 ,测试 组 人 员 必 须 及 时 跟踪 软件 开发 的 过 程 , 对 产品 提交 测试 做 准备 。 测 
试 计划 变更 来 源 于 以 下 几 个 方面 : 项 目 计 划 的 变更 ; 需求 的 变更 ; 测试 产品 版 本 的 变更 ; 测 
试 资源 的 变更 等 。 

测试 工作 量 的 估算 是 比较 复杂 的 ,针对 不 同 的 应 用 领域 程序 设计 技术 、 编 程 语言 等 ,其 估 
算 方 法 是 不 同 的 。 测 试 工作 量 的 估算 首先 要 将 软件 测试 工作 进行 WBS(Work Breakdown 
Structure) 分 解 ,通过 分 解 定义 的 任务 ,并 根据 以 前 项 目测 试 的 经 验 和 历史 数据 确定 具体 任务 
的 工作 量 , 工 作 量 一 般 以 人 月 数 或 人 天 数 为 单位 ,再 根据 工作 量 并 结合 企业 生产 率 估算 出 
成 本 。 


10.2 测试 的 组 织 


组 织 结构 是 指 用 一 定 的 模式 对 责任 、 权 威 和 关系 进行 安排 ,直至 通过 这 种 结构 发 挥 功能 。 
1. 组 织 结构 选择 因素 
软件 测试 组 织 结构 可 以 考虑 以 下 因素 : 
。 垂直 还 是 平缓 : 垂直 的 组 织 结构 是 在 首席 管理 者 与 低级 测试 人 员 之 间 设 立 许多 层次 ， 

平缓 的 垂直 组 织 结构 设 立 很 少 的 几 个 层次 。 平 缓 的 组 织 结构 的 测试 工作 效率 较 高 。 
。 市 场 还 是 产品 : 组 织 结构 的 设置 可 以 是 面向 不 同 的 市 场 或 不 同 的 产品 。 
集中 还 是 分 散 : 组 织 可 以 是 集中 的 ,也 可 以 是 分 散 的 。 这 对 于 测试 组 织 比较 关键 ,为 
保证 测试 的 独立 性 ,一 般 测 试 组 织 要 相对 集中 。 
分 级 还 是 分 散 : 可 以 将 组 织 按 权力 和 级 别 一 层 一 层 地 分 级 ,也 可 以 分 散 排列 开 。 在 软 
件 开发 小 组 内 的 测试 常 使 用 这 种 分 散 的 方式 ,测试 小 组 在 开发 小 组 内 ,可 以 是 专职 测 
试 人 员 ,或 者 以 测试 角色 的 形式 组 成 。 
专业 人 员 还 是 工作 人 员 : 测试 组 织 应 拥有 一 定 比 例 的 专业 测试 人 员 和 工作 人 员 。 

。 功能 或 非 功能 或 项 目 : 测试 组 织 可 以 面向 功能 的 测试 或 者 是 非 功能 性 的 测试 或 整个 

项 目的 测试 。 

2. 结合 实际 选择 组 织 方案 

依据 组 织 结构 因素 可 以 组 成 不 同 的 组 织 方案 ,软件 测试 团队 的 组 织 直接 关系 到 测试 团队 
的 工作 效率 和 生产 力 ,实际 情况 是 软件 开发 机 构 和 测试 机 构 可 以 根据 项 目的 实际 建立 适合 自 
己 的 测试 组 织 形式 ,如 由 测试 团队 规模 和 具体 任务 、 个 人 的 技术 能 力 等 因素 决定 测试 组 织 的 形 
式 。 常 见 的 组 织 方式 可 分 为 基于 技能 的 组 织 模式 或 基于 项 目的 组 织 模式 。 

(1) 基于 技能 的 组 织 模式 。 

测试 人 员 不 须 涉及 多 个 主题 ,只 需 集中 精力 在 某 一 专业 领域 ,因此 测试 人 员 必 须 掌握 专业 
测试 工具 的 使 用 方法 和 复杂 的 测试 技术 。 

(2) 基于 项 目的 组 织 模式 。 

测试 人 员 分 配 在 一 个 项 目 中 ,以 减少 工作 中 的 中 断 和 转换 ,有 利于 系统 各 模块 的 协调 、 
集成 。 

选择 合理 高 效 的 测试 组 织 结构 方案 的 准则 是 : 


独立 
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。 有 利于 在 测试 过 程 中 提供 快速 决策 能 力 ; 

。 有 利于 软件 产品 开发 和 测试 之 间 的 沟通 合作 ,也 有 利于 测试 团队 内 部 的 沟通 和 合作 ; 

。 能 够 独立 ,规范 .不 带 偏见 地 运作 整个 测试 过 程 并 具有 精干 的 人 员 配 置 ; 

。 有 利于 协调 软件 测试 与 质量 管理 之 间 的 关系 ; 

。 适应 并 满足 软件 测试 过 程 管理 的 要 求 ， 

。 有 利于 测试 技术 实施 和 测试 工具 的 使 用 ; 

。 能 充分 利用 现 有 测试 资源 ,尤其 是 人 力 资源 ; 

。 有 利于 对 测试 计划 的 调整 

。 对 测试 者 的 职业 道德 ,技术 水 准 及 业务 产生 积极 的 影响 。 

3. 测试 组 织 的 独立 性 

测试 组 织 是 一 种 资源 或 一 系列 的 资源 的 集合 ,专门 从 事 软件 测试 活动 。 软 件 测试 机 构 的 
有 很 多 好 处 。 独 立 测 试 是 指 软件 测试 工作 由 在 经 济 上 和 管理 上 独立 于 开发 机 构 的 组 织 进 
独立 测试 可 以 避免 软件 开发 者 测试 自己 开发 的 软件 ,由 于 心理 学 上 的 问题 ,软件 开发 者 难 
观 \ 有 效 地 测试 自己 的 软件 ,要 找 出 那些 因为 对 问题 的 误解 而 产生 的 错误 就 更 加 困难 。 独 
试 还 可 以 避免 软件 开发 机 构 测试 自己 的 软件 ,软件 产品 的 开发 过 程 受到 时 间 、 成 本 和 质量 
的 制约 ,在 软件 开发 的 过 程 中 ,当时 间 、 成 本 和 质量 三 者 发 生 矛 盾 时 ,质量 最 容易 被 忽视 ， 
测试 组 织 与 开发 组 织 来 自 相 同 的 机 构 ,测试 过 程 就 会 面临 来 自 于 开发 组 织 同一 来 源 的 管 
面 的 压力 ,使 测试 过 程 受到 干扰 。 

采用 独立 测试 方式 ,无 论 在 技术 上 还 是 管理 上 ,对 提高 软件 测试 的 有 效 性 都 具有 重要 
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。 客观 性 。 对 软件 测试 和 软件 中 的 错误 或 缺陷 抱 着 客观 的 态度 ,这 种 客观 的 态度 可 以 解 
决 测试 中 的 心理 学 问题 , 既 能 以 发 现 软件 中 错误 或 缺陷 的 态度 去 工作 ,也 能 不 受 所 发 
现 错误 或 缺陷 的 影响 。 经 济 上 的 独立 性 使 测试 有 更 充分 的 条 件 按 测试 要 求 去 完成 。 
专业 性 。 独 立 测 试 作为 一 种 专业 工作 ,在 长 期 的 工作 过 程 中 势必 能 够 积累 大 量 实践 经 
验 , 形 成 自己 的 专业 知识 。 同 时 软件 测试 也 是 技术 含量 很 高 的 工作 ,需要 有 专业 队伍 
加 以 研究 ,并 进行 工程 实践 。 专 业 化 分 工 是 提高 测试 水 平 、 保 证 测试 质量 ` 充 分 发 挥 测 
权威 性 。 由 于 专业 优势 ,独立 测试 工作 形成 的 测试 结果 更 具 信 服 力 , 而 测试 结果 常常 
和 对 软件 的 质量 评价 联系 在 一 起 ,专业 化 的 独立 测试 机 构 的 评价 更 客观 ` 公 正和 具有 
权威 性 。 

资源 有 保证 。 独 立 测 试 机 构 的 主要 任务 是 进行 独立 测试 工作 ,这 使 得 测试 工作 在 经 
费 、 人 力 和 计划 方面 更 有 保证 ,不 会 因为 开发 的 压力 减少 对 测试 的 投入 ,避免 降低 测试 
的 有 效 性 ,这 样 可 以 避免 开发 单位 侧重 软件 开发 而 对 测试 工作 产生 不 利 的 影响 。 

随 着 软件 企业 规模 的 不 断 增 大 、 软 件 系统 的 复杂 度 增强 及 对 软件 质量 的 要 求 的 提高 ,必须 
独立 专门 的 测试 队伍 。 这 样 能 确保 测试 没有 偏见 ,只 有 不 持 偏 见 才 能 提供 不 带 有 偏见 的 
结果 和 度量 。 

Bill Hetzel 在 《软件 测试 指南 大 全 》(1988) 一 书 中 写 道 :“ 独 立 的 测试 组 织 十 分 重要 ,因为 
这 样 的 一 个 独立 的 测试 组 织 , 建 立 的 系统 就 不 会 理想 ; 有 效 地 度量 对 于 产品 质量 控制 是 
重要 的 ; 测试 协调 需要 全 职 、 专 门 的 人 员 去 投入 ”。 


4. 测试 人 员 
测试 人 员 一 般 包 括 测试 管理 者 和 测试 技术 人 员 。 测 试管 理 者 和 测试 技术 人 员 在 测试 团队 
中 的 分 工 是 不 同 的 。 测 试 经 理 的 任务 主要 是 负责 整个 测试 项 目 , 包 括 制定 测试 计划 、 协 调和 管 
理 监督 测试 过 程 ,和 其 他 小 组 的 沟通 、 协 调 等 。 测 试 成 员 负 责 测 试 计划 中 具体 事项 的 执行 , 记 
录 并 报告 测试 结果 等 。 
测试 管理 本 身 很 复杂 ,所 以 对 测试 管理 者 提出 了 比较 高 的 要 求 ,测试 管理 者 应 该 具备 : 
。 理解 与 评价 软件 测试 政策 、 规 范 与 标准 、 测 试 过 程 、 测 试 工具 、 培 训 及 度量 的 能 力 ; 
。 领导 一 个 测试 组 织 的 能 力 ,该 组 织 必须 坚强 有 力 ,独立 自主 、 办 事 规范 没有 偏见 ; 
。 保存 组 织 的 活力 和 凝聚 力 ; 
。 领导 沟通、 支持 和 控制 的 能 力 ， 
。 驾驭 测试 时 间 、 质 量 和 成 本 控制 的 能 力 。 
对 于 测试 技术 人 员 的 能 力 应 该 包括 以 下 几 项 : 
。 一 般 能 力 : 包括 表达 交流、 协调 ,管理 .质量 意识 、 软 件 工程 等 相关 知识 。 
。 测试 技能 及 方法 : 包括 测试 基本 概念 及 方法 、 测 试 工具 及 环境 ,专业 测试 标准 、 测 试用 
例 的 分 析 和 设计 能 力 等 。 
， 协助 测试 规划 能 力 : 包括 风险 分 析 及 防范 、 测 试 进入 标准 /通过 准则 / 挂 起 准则 制定 、 
测试 计划 的 制定 等 。 
。 测试 执行 能 力 : 包括 测试 数据 准备 /脚本 编写 /用 例 执行 、 测 试 结果 的 比较 及 分 析 、 缺 
陷 记 录 跟踪 和 处 理 、 自 动 化 工具 的 使 用 等 。 
。 测试 分 析 、 报 告 和 改进 能 力 : 包括 测试 度量 、 统 计 分 析 技 术 、 测 试 报告 的 撰写 ,过 程 监 
测 及 持续 改进 等 。 
测试 人 员 需 要 激励 机 制 ,激励 机 制 在 通用 的 管理 学 里 也 称 为 员工 激励 制度 ,是 通过 一 套 理 
性 化 的 制度 来 反映 员工 与 企业 相互 作用 的 体现 。 一 是 可 以 运用 工作 激励 ,尽量 把 员工 放 在 他 
所 适合 的 位 置 上 ,并 在 可 能 的 条 件 下 轮换 一 下 工作 以 增加 员工 的 新 奇 感 ,培养 员工 对 工作 的 热 
情 和 积极 性 ; 二 是 可 以 运用 参与 激励 ,通过 参与 ,形成 员工 对 企业 的 归属 感 .认同 感 ,可 以 进 一 
步 满足 自尊 和 自我 实现 的 需要 ,激发 出 员工 的 积极 性 和 创造 性 。 三 是 管理 者 要 把 物质 激励 与 
形象 激励 有 机 地 结合 起 来 ,给 予 先 进 模范 人 物 奖 金 ,物品 .晋级 , 提 职 固然 能 起 到 一 定 作 用 ,但 
形象 化 激励 能 使 激励 效果 产生 持续 、 强 化 的 作用 。 
按照 美国 心理 学 家 A. H. Maslow 激励 的 需求 层次 理论 ,这 些 需求 包括 : 
。 生理 的 需求 。 如 衣 、 食 、 睡 、 住 水. 行 性 。 
。 安全 的 需求 。 如 保障 自身 安全 、 摆 脱 失业 和 丧失 财产 。 
社交 的 需求 。 如 情感 交往 ,归属 要 求 。 
被 尊重 的 需求 。 如 自尊 (有 实力 有 成 就 .能 胜任 有 信心 、 独 立 和 自由 ), 受 人 尊重 (有 
威望 被 赏识 、 受 到 重视 和 高 度 评价 ) 。 
自我 实现 的 需求 。 其 特征 是 自发 性 的 集中 处 理 问题 .自立 的 有 不 断 的 新 鲜 感 .幽默 
感 .浓厚 兴趣 ,不 受 东 缚 的 想象 力 、 反 潮流 精神 、 创 造 力 、 讲 民主 的 性 格 。 
在 某 一 阶段 上 ,人 的 多 种 需求 并 存 , 但 只 有 一 种 需求 取得 主导 地 位 。 在 不 同时 期 ,需求 结 
构 在 动态 变化 ,大 致 是 逐步 从 低 到 高 .从 外 部 向 内 部 满足 。 满 足 上 行 机 制 , 即 尚未 满足 的 较 低 
层 需 求 总 是 主宰 的 ,只 有 在 满足 它 之 后 ,紧邻 的 高 一 层 需 求 才 被 激活 成 为 主宰 。 挫 折 下 行 机 
制 , 即 高 一 层 需求 在 未 得 到 满足 、 受 到 挫折 后 , 低 一 层次 的 需求 重新 成 为 主宰 。 


这 些 激励 机 制 的 理论 同样 适用 于 软件 测试 人 员 ,是 软件 测试 的 管理 者 必须 领悟 和 运用 的 。 
测试 人 员 培 训 是 一 个 测试 组 织 机 构 必 须 特 别 关注 的 问题 ,由 于 测试 团队 的 技术 能 力 欠缺 、 
经 验 不 足 , 业 务 不 熟悉 以 及 提升 整体 测试 水 平和 人 员 流 失 等 多 种 原因 均 需 要 对 测试 人 员 进 行 
培训 。 软 件 测试 培训 的 内 容 可 以 有 以 下 分 类 : 
。 测试 基础 知识 和 测试 技术 培训 。 
。 测试 的 分 析 和 设计 培训 。 
。 测试 的 相关 工具 培训 。 
。 测试 对 象 的 业务 培训 。 
。 测试 过 程 培训 。 
。 测试 管理 培训 。 
测试 培训 常常 是 测试 一 个 软件 项 目的 重要 组 成 部 分 ,在 制定 测试 人 员 的 培训 计划 时 ,应 该 
关注 以 下 方面 : 
培训 计划 往往 是 测试 计划 的 一 个 重要 组 成 部 分 。 
培训 需要 管理 层 的 重视 ,在 时 间 和 相关 资源 上 予以 保证 。 
培训 的 目的 和 目标 明确 ,认真 调查 和 分 析 测 试 人 员 的 培训 需求 。 
培训 活动 一 般 安排 在 测试 任务 开始 前 。 或 者 由 于 时 间 关 系 ,根据 需 要 采用 渐进 培训 的 
方式 。 
不 提倡 在 测试 过 程 中 掌握 测试 技能 ,这 样 很 可 能 牺牲 质量 、 效 率 和 成 本 。 
软件 测试 实践 活动 是 整个 培训 的 重要 组 成 部 分 , 占 较 大 比例 。 
培训 鼓励 采用 团队 协作 模式 。 
建立 对 培训 效果 及 时 评价 机 制 ,不 足 之 处 持续 改进 。 


10.3 测试 过 程 监控 


在 实际 的 测试 过 程 中 ,可 以 采用 如 下 的 方法 对 测试 工作 进行 监控 : 周报 .问讯 及 查阅 相关 
测试 文档 相 结合 。 对 关键 点 进行 抽样 审核 ,并 询问 不 同 的 人 员 以 进行 核实 。 在 测试 监控 过 程 
中 ,一般 会 经 历 如 下 阶段 ， 

。 了 解 情况 。 

。 发 现 问题 。 
核实 问题 。 
评估 影响 。 

。 给 出 处 理 方案 。 

。 解决 问题 。 

首先 依据 测试 管理 的 规程 和 经 验 , 通 过 项 目 成 员 的 周报 .问讯 项 目 组 的 相关 人 员 , 了 解 测 
试 的 过 程 是 否 符合 通常 的 测试 规范 ; 通过 周报 .问讯 记录 发 现 问题 或 者 疑问 ; 通过 查阅 相关 
的 测试 文档 ,最 后 核实 发 现 的 问题 或 疑问 的 真实 性 ; 汇总 所 有 问题 ,评估 各 个 问题 的 影响 和 风 
险 , 列 出 优先 级 ; 给 出 可 能 的 解决 方案 (注意 ,这 里 的 解决 方案 不 是 指 具体 的 解决 方法 ,而 是 指 
激发 项 目 组 成 员 行 动 的 可 行 的 方案 .如 项 目 组 开会 讨论 可 能 的 处 理 方式 等 ); 跟踪 解决 方案 ， 
验证 问题 是 否 真正 得 到 解决 。 

以 上 是 一 个 通行 的 监控 过 程 ,这 里 需要 强调 的 一 点 是 : 不 管 出 于 什么 理由 对 测试 过 程 进 


行 监控 ,发 现 问题 不 是 我 们 的 目标 ,能 够 有 效 地 解决 问题 降低 测试 的 风险 才 是 我 们 的 目标 。 
对 测试 过 程 的 监控 ,依据 测试 项 目 所 处 的 阶段 不 同 分 为 三 个 阶段 进行 前 述 : 测试 初始 期 ,测试 
实施 期 ,测试 结束 期 。 这 三 个 阶段 适用 于 单元 测试 ,集成 测试 .系统 测试 和 验收 测试 。 

1. 测试 初始 期 

在 这 个 阶段 ,测试 工作 刚刚 启动 即 开 始 制定 测试 计划 。 测 试 工作 的 启动 时 间 点 在 不 同 的 
企业 或 不 同 的 测试 项 目 或 不 同 的 测试 级 别 可 能 不 同 ,如 需求 调研 结束 系统 测试 启动 ,详细 设计 
结束 单元 测试 启动 等 。 在 本 阶段 的 监控 主要 涉及 计划 的 制定 和 测试 的 前 期 准备 ,测试 计划 的 
制定 可 以 按照 10. 1 节 的 要 求 去 完成 ,这 里 重点 分 析 测 试 计划 中 所 涉及 的 测试 范围 的 确定 ,这 
是 测试 初始 期 的 监控 重点 。 

在 做 测试 之 前 ,一 定 要 明确 测试 范围 ,预计 达到 的 质量 标准 是 什么 ”哪些 需要 进行 重点 测 
试 ? 哪些 不 需要 进行 测试 ? 很 多 测试 经 理 都 有 这 样 的 抱怨 :“ 我 们 不 可 能 在 前 期 把 测试 范围 
弄 清 楚 , 开 发 人 员 都 不 知道 产品 将 来 是 什么 样子 ,我 们 怎么 知道 需要 测试 哪些 内 容 ?" 乍 一 听 ， 
感觉 很 有 道理 ,但 是 情况 是 否 真 像 大 家 说 的 那样 ? 作为 公司 ,或 者 项 目 经 理 都 希望 能 将 项 目 做 
好 ,能 生产 出 一 件 令 用 户 满意 的 软件 产品 ,如 果 这 个 假设 成 立 的 话 ,这 也 就 是 我 们 能 够 改变 现 
状 的 动力 。 

实际 上 ,开发 人 员 并 不 是 完全 不 知道 他 们 将 开发 生产 什么 样 的 产品 ,而 是 就 一 些 细节 考虑 
的 不 够 ,或 者 不 周全 。 作 为 测试 人 员 ,一 定 要 知道 怎么 对 软件 产品 的 功能 和 非 功能 需求 进行 验 
证 ,这 实际 上 在 帮助 开发 人 员 从 使 用 者 的 角度 上 重新 审视 一 遍 需 求 , 也 许 这 时 候 开发 人 员 也 说 
不 清楚 , 那 如 果 我 们 和 开发 人 员 都 非常 清楚 哪些 是 明确 的 ,哪些 是 需要 后 面 再 补充 的 ,也 已 经 
达到 了 我 们 的 目的 。 

例如 ,对 于 被 测 系统 有 无 明确 的 性 能 指标 ?对 性 能 要 求 比较 高 的 系统 ,需要 在 前 期 明确 具 
体 指标 到 底 是 多 少 ? 用 何 种 手段 进行 确认 ? 用 户 是 否认 可 这 个 指标 的 描述 以 及 确认 的 方法 。 
性 能 指标 也 可 能 不 明确 ,而 从 需求 中 的 一 些 敏 感 数字 中 来 获得 ,如 必须 保证 能 处 理 3000 个 在 
线 用 户 同 时 操作 ,主要 业务 系统 响应 时 间 不 能 大 于 1. 5s 等 。 针 对 这 些 数据 ,测试 人 员 一 定 要 
细 化 数据 背后 的 含义 ,使 这 些 数 据 变 得 可 验证 。 在 规划 这 些 性 能 指标 的 验证 方式 时 ,首先 需要 
明确 软 硬 件 的 环境 是 什么 ? 在 此 基础 上 ,还 需 知道 什么 叫 3000 个 在 线 用 户 同 时 操作 ? 都 操作 
什么 ? 这 个 场景 应 该 怎么 模拟 ? 只 有 和 这 个 指标 相关 的 所 有 验证 方法 都 可 行 ,而 且 得 到 了 认 
可 ,在 后 续 的 测试 活动 中 才能 相信 这 条 性 能 指标 能 够 进行 测试 ,这 些 涉及 范围 的 内 容 在 测试 计 
划 中 应 该 明确 。 

测试 计划 中 是 否 有 明确 的 测试 过 程 阶段 划分 ? 各 阶段 是 否 有 明确 的 交付 确认 条 件 ? 实际 
过 程 中 ,我 们 都 会 将 测试 工作 按照 阶段 进行 划分 ,如 划分 为 软件 测试 计划 ,测试 分 析 和 设计 , 测 
试 实施 、 执 行 和 监控 ,测试 报告 及 测试 结束 活动 等 阶段 。 计 划 中 需要 明确 一 点 ,这 些 阶 段 的 划 
分 是 不 是 只 有 时 间 点 的 描述 ,而 没有 各 个 阶段 之 间 可 量化 .可 衡量 的 交付 确认 条 件 ? 

如 果 只 有 时 间 点 的 划分 , 那 我 们 已 经 可 以 断定 ,这 个 测试 项 目 势必 会 延期 ,原因 是 在 整个 
生产 活动 过 程 中 没有 明确 的 阶段 点 交付 的 检验 标准 ,问题 肯定 会 沿 着 整个 开发 过 程 逐步 地 传 
递 下 去 ,终归 会 在 某 一 点 爆发 ,最 不 幸 的 爆发 点 是 在 客户 处 。 

如 果 想 尽量 避免 上 述 的 风险 ,就 需要 在 开发 过 程 中 明确 测试 计划 中 各 个 阶段 点 之 间 的 交 
付 、 确 认 条 件 。 而 且 这 些 条 件 必须 可 量化 .可 衡量 , 决 不 能 是 含糊 的 ,不 易 操 作 的 ,否则 在 实际 
操作 过 程 中 还 是 会 将 大 量 的 问题 推 入 下 一 个 阶段 。 

下 面 也 以 单元 测试 的 结束 阶段 为 例 ,看 看 如 何 建立 一 个 可 量化 、 可 衡量 的 单元 测试 阶段 的 


交付 标准 。 

根据 提交 的 单元 测试 总 结 报告 ,需要 评估 一 下 单元 测试 的 质量 ,主要 可 以 通过 如 下 方法 : 
是 否 有 足够 的 单元 测试 用 例 ? 可 以 对 照 详 细 设 计 规 约 了 解 单元 测试 用 例 的 数量 来 量化 ; 单元 
测试 用 例 的 通过 率 必 须 达 到 90% 以 上 ; 还 可 以 抽样 执行 开发 人 员 编 写 的 单元 测试 用 例 ,抽样 
执行 的 单元 测试 用 例 的 一 次 通过 率 必须 在 90% 以 上 。 这 也 是 一 个 量化 的 方法 ,同时 检查 了 测 
试用 例 书 写 的 质量 和 单元 测试 执行 的 质量 。 如 果 均 符合 要 求 ,可 以 认为 单元 测试 完成 。 这 些 
可 量化 的 标准 在 测试 计划 中 应 该 体现 。 

在 测试 的 初始 期 ,除了 对 测试 计划 中 的 范围 界定 之 外 ,对 整个 测试 计划 做 严格 的 评审 ,使 
计划 在 后 续 的 测试 实施 监控 中 具有 可 行 性 。 当 然 ,测试 计划 的 调整 往往 也 是 不 可 避免 的 ,但 要 
尽量 避免 不 必要 的 调整 ,如 由 于 前 期 测试 计划 的 人 为 缺陷 而 导致 后 期 对 测试 计划 做 大 量 的 调 
整 。 另 外 ,需要 对 在 实施 阶段 需要 的 各 种 资源 进行 监控 ,如 人 力 资源 、 测 试 环境 资源 等 。 

2. 测试 实施 期 

在 这 个 阶段 ,测试 工作 进行 了 一 段 时 间 ,测试 人 员 的 工作 应 该 已 经 步 人 正轨 ,按部就班 地 
完成 应 该 完成 的 任务 。 这 个 阶段 的 特点 是 开发 人 员 和 测试 人 员 都 按照 日 常 的 规范 开始 有 条 不 
芭 地 工作 ,有 可 能 对 一 些 问题 已 经 习以为常 ,或 者 已 经 被 同化 。 作 为 测试 管理 者 ,应 该 在 看 似 
合理 的 工作 中 找 出 影响 质量 的 问题 ,规避 风险 。 在 这 个 阶段 ,应 该 关注 以 下 问题 : 

(1) 测试 过 程 是 否 按照 测试 计划 中 规定 的 测试 过 程 执行 ? 

在 测试 实施 阶段 ,还 需要 了 解 测试 人 员 是 否 按照 测试 计划 中 规定 的 测试 过 程 执行 ,但 是 要 
在 短 时 间 内 了 解 , 只 能 是 通过 周报 ,查询 相关 文档 和 询问 的 方式 进行 ,再 加 以 判断 。 如 果 公 司 
有 SQA 人 员 ,工作 就 相对 简单 了 ,只 需要 到 配置 管理 库 中 找到 SQA 的 检查 报告 ,这 些 疑 问 就 
= 月 了 然 了 了。 

(2) 项 目 先 前 定义 的 测试 范围 在 后 续 的 调整 计划 ,方案 中 是 否 有 遗漏 ? 

在 测试 初始 期 我 们 一 直 强 调 测 试 范围 的 必要 性 ,在 测试 实施 阶段 还 需要 检查 前 期 规划 的 
测试 范围 是 否 在 后 续 的 计划 活动 中 覆盖 完全 了 ,只 有 计划 中 完全 覆盖 了 所 列 的 测试 范围 ,才能 
保证 系统 的 质量 。 

(3) 关键 测试 活动 的 关键 测试 资源 是 否 如 期 到 位 ? 如 没有 到 位 ,是 否 通过 合理 的 规划 来 
完成 延误 的 测试 工作 ? 

在 测试 过 程 中 , 某 些 关键 测试 任务 需要 用 到 特殊 的 设备 或 者 特殊 人 员 的 技能 , 称 为 关键 资 
源 。 在 测试 实施 过 程 中 ,要 提前 计划 那些 将 用 到 的 关键 资源 ,以 免 耽 误 项 目 进度 。 作 为 测试 的 
监控 者 ,需要 非常 关心 这 些 关 键 资源 的 使 用 情况 ,因为 如 果 关 键 资源 不 能 如 期 到 位 ,势必 要 影 
响 项 目的 整体 进度 。 如 果 由 于 某 种 原因 ,关键 资源 没有 如 期 到 位 ,要 注意 测试 人 员 是 否 对 计划 
进行 了 修订 ,修订 的 结果 是 否 可 以 弥补 已 经 造成 的 损失 ,或 者 能 最 大 程度 地 减少 损失 。 

(4) 测试 的 相关 文档 是 否 都 按照 项 目 目前 的 实际 情况 进行 了 更 新 ,并 严格 遵照 执行 ? 

经 常会 听 到 的 一 句 话 就 是 : 计划 赶不上 变化 。 这 个 问题 就 是 冲 着 这 句 话 来 的 。 很 多 人 问 
这 样 一 个 问题 : 不 做 计划 ,直接 做 事情 行 不 行 ? 我 说 不 行 。 但 是 ,如 果 计 划 和 行动 不 同步 ,这 
个 和 没有 计划 又 有 什么 区 别 ? 同步 的 计划 是 降低 测试 风险 的 合理 方法 。 

(5) 测试 策略 测试 计划 、 测 试 方案 和 测试 用 例 是 否 都 通过 了 正式 评审 ? 发 现 的 问题 是 否 
都 进行 了 更 正 ? 

作为 测试 的 监控 者 ,不 可 能 在 短 时 间 内 评估 一 份 测试 计划 制定 的 是 否 合理 有 效 ,一 份 测试 
方案 是 否 可 以 正确 实施 .并且 也 没 必要 这 么 做 。 


测试 策略 ,测试 计划 、 测 试 方案 和 测试 用 例 等 文档 都 是 测试 过 程 中 的 关键 文档 ,也 直接 决 
定 了 测试 工作 的 质量 。 应 该 检查 这 些 文档 的 评审 记录 ,看 看 相关 的 人 员 是 否 参 加 了 该 评审 ,都 
发 现 了 什么 问题 ,大 家 的 意见 和 建议 都 有 哪些 。 最 后 ,看 看 发 现 的 所 有 问题 是 否 都 得 到 了 解 
决 ,文档 是 否 按照 解决 的 方法 进行 了 修订 。 

在 监控 的 过 程 中 ,默认 参与 评审 的 人 员 技术 能 力 都 符合 要 求 ,这 样 只 需要 关注 评审 的 过 程 
就 可 以 控制 质量 了 。 但 是 ,如 果 有 证 据 证 明 评 审 的 人 员 或 者 组 成 不 符合 要 求 ,作为 监控 者 应 该 
宣布 该 文档 的 评审 无 效 , 需 重新 进行 评审 ,以 解决 问题 。 但 是 ,使 用 这 项 权利 的 时 候 要 小 心 ,而 
且 要 充分 论证 ,否则 会 扰乱 项 目 组 的 正常 秩序 。 

(6) 缺陷 管理 流程 是 否 规范 ? 每 个 缺陷 的 提交 和 关闭 是 否 都 有 复查 ? 

缺陷 管理 贯穿 于 整个 软件 开发 过 程 ,是 测试 过 程 的 关键 环节 ,也 是 测试 工作 的 根本 ,所 以 
缺陷 管理 的 流程 是 否 规范 将 是 监控 的 重点 。 应 该 以 一 个 实际 缺陷 为 线索 ,追寻 这 个 缺陷 的 产 
生 直 到 关闭 的 过 程 ,期 间 是 否 有 相关 的 记录 ,验证 项 目 组 的 实施 过 程 与 计划 中 的 要 求 是 否 一 
致 ,验证 缺陷 的 提交 和 关闭 是 否 都 进行 了 复查 。 

缺陷 提交 和 关闭 的 复查 人 可 以 是 测试 管理 者 自己 ,或 者 测试 管理 者 指定 的 人 选 ,一 方面 经 
过 复查 ,可 以 减少 缺陷 的 重复 提交 ,提高 缺陷 报告 的 质量 ; 另 一 方面 ,在 测试 组 中 会 有 一 个 人 
对 系统 或 一 个 大 组 件 的 质量 情况 有 比较 全 面 的 了 解 ,尤其 在 后 期 ,这 种 了 解 会 在 很 大 程度 上 降 
低 系统 误 发 布 的 风险 。 还 有 一 个 好 处 是 在 测试 人 员 和 开发 人 员 交 互 的 过 程 中 ,这 个 复查 人 员 
起 到 了 桥梁 的 作用 ,可 以 有 效 地 隔离 开发 与 测试 之 间 的 多 头 沟通 ,在 一 定 程度 上 提高 了 效率 。 
这 个 角色 可 以 是 专职 的 ,也 可 以 是 兼职 的 ,关键 看 系统 的 大 小 。 

(7) 配置 管理 工作 是 否 规范 ? 测试 过 程 中 涉及 的 版 本 是 否 都 可 以 完整 地 追溯 ? 测试 版 本 
的 发 放 频 度 是 否 符合 测试 的 实际 要 求 ? 

配置 管理 工作 是 整个 软件 开发 过 程 的 生命 线 , 相 比较 而 言 ,开发 人 员 对 此 应 该 更 为 关心 。 
对 于 测试 人 员 来 讲 ,一 方面 要 保证 可 以 从 版 本 库 中 取 到 自己 想 要 的 软件 版 本 , 另 一 方面 可 以 随 
时 得 到 自己 关注 的 任意 一 软件 的 测试 版 本 ,以 便 可 以 在 正确 的 版 本 上 执行 正确 的 测试 用 例 。 

在 实际 检查 过 程 中 可 以 在 缺陷 库 中 任意 选择 一 个 缺陷 ,查看 这 个 缺陷 是 在 哪 一 个 版 本 的 
软件 中 发 现 的 ,随即 在 配置 库 中 调 出 该 版 本 ,看 是 否 可 以 调 出 。 随 后 ,查阅 该 缺陷 在 哪 一 个 版 
本 中 修订 正确 了 ,随即 也 在 配置 库 中 调 出 该 版 本 ,看 是 否 可 查 到 。 

在 这 个 过 程 中 ,还 需要 注意 开发 部 门 提交 给 测试 部 门 版 本 的 频繁 度 ,看 是 否 过 快 或 者 过 
慢 。 过 快 或 者 过 慢 , 没 有 一 个 时 间 上 的 判断 。 比 如 每 两 天 提供 一 个 新 版 本 供 测试 人 员 进 行 测 
试 ,这 个 是 过 快 还 是 过 慢 ? 判断 的 依据 关键 要 看 测试 人 员 所 处 的 状态 , 当 版 本 提交 的 过 快 时 ， 
测试 人 员 一 直人 忙于 对 已 修订 好 的 缺陷 进行 反 测 ,没有 时 间 对 新 功能 进行 测试 。 当 版 本 提交 过 
慢 的 时 候 ,测试 人 员 的 时 间 比 较 空闲 。 

在 监控 过 程 中 ,只 需要 询问 测试 人 员 的 测试 工作 的 紧张 程度 ,一 般 就 能 够 判断 出 版 本 提交 
的 频 度 是 否 有 问题 了 。 

3. 测试 结束 期 

在 这 个 阶段 ,主要 的 测试 工作 已 经 进行 完毕 ,最 终 的 发 布 版 本 也 已 经 准备 出 来 。 准 备 起 草 
最 终 的 测试 报告 ,申请 发 布 。 

作为 测试 的 监控 者 ,这 个 阶段 的 主要 任务 就 是 评估 软件 产品 的 质量 ,依据 已 有 的 数据 评估 
测试 工作 是 否 做 到 位 ,产品 是 否 可 以 发 布 。 

在 这 个 阶段 ,应 该 如 何 进行 监控 ? 关注 以 下 方面 : 


高 级 软件 测试 技术 _ 

(1) 测试 中 发 现 的 缺陷 趋势 曲线 是 否 处 于 收敛 状态 ? 各 个 分 模块 的 缺陷 趋势 曲线 是 否 基 
本 一 致 ? 

测试 完成 后 ,判断 产品 是 否 能 够 发 布 的 一 个 重要 条 件 就 是 缺陷 趋势 曲线 处 于 收敛 状态 ,并 
且 能 持续 一 段 时 间 ,表示 系统 处 于 稳定 状态 ,满足 发 布 条 件 。 

那 为 什么 还 要 看 各 个 分 模块 的 曲线 是 否 一 致 ” 因为 有 的 系统 比较 庞大 ,有 可 能 某 一 个 局 
部 的 缺陷 曲线 还 没有 处 于 收敛 状态 ,但 是 整个 系统 的 缺陷 趋势 图 已 经 把 这 个 信息 掩盖 掉 了 。 
所 以 ,还 需要 分 别 检查 各 个 模块 的 趋势 曲线 ,确保 系统 的 每 一 个 部 分 都 处 于 稳定 状态 ,这 样 发 
布 的 风险 才能 降 到 最 低 。 

(2) 是 否 有 评判 产品 能 否 发 布 的 文字 性 材料 ? 

发 布 前 ,测试 组 或 者 项 目 经 理 必须 提交 一 份 整个 系统 的 整体 质量 说 明 , 以 文档 的 形式 证 明 
整个 系统 质量 稳定 ,达到 用 户 要 求 ,可 以 发 布 。 

在 这 个 过 程 中 ,如 果 和 客户 有 关于 质量 的 约定 ,还 需 加 入 其 中 ,如 在 验收 测试 中 的 用 户 签 
字 认可 的 验收 报告 ,用 户 签字 认可 的 性 能 测试 报告 等 。 

是 否 召开 了 正式 的 最 终 评审 会 议 ? 会 议 的 参与 评审 人 员 是 否 有 公司 主管 的 高 层 ? 是 否 有 
用 户 或 者 能 体现 用 户 方 意见 的 人 员 参 与 ? 所 有 的 遗留 问题 是 否 都 有 了 明确 的 解决 方案 ,并 且 
有 相关 的 责任 人 负责 问题 的 解决 和 跟踪 。 

在 发 布 前 ,还 需要 召开 正式 的 评审 会 议 ,而 且 会 议 除 了 必须 有 项 目 组 以 外 ,还 要 有 主管 该 
项 目的 公司 高 层 和 能 体现 用 户 方 意见 的 人 员 参 加 并 给 出 一 个 评估 ,以 决定 该 产品 是 否 能 够 
发 布 。 

如 果 确 定 有 问题 遗留 在 系统 中 后 ,还 需要 对 这 个 遗留 问题 有 个 明确 的 解决 办 法 ,如 在 升级 
版 本 中 修改 ,建议 用 户 如 何 绕 过 ,或 者 干脆 不 再 进行 修改 ,都 应 该 有 一 个 明确 的 答复 ,而且 还 需 
要 指派 专门 的 人 员 跟 踪 问题 的 解决 情况 ,并 进行 报告 。 

(3) 在 测试 计划 中 确定 的 退出 测试 条 件 是 否 都 得 到 了 满足 ? 

为 了 能 保证 系统 的 正常 交付 ,在 计划 中 有 退出 测试 的 约定 条 件 ,在 这 个 阶段 ,需要 确定 这 
些 条 件 是 否 都 得 到 了 满足 ,并 有 相关 的 证 明 。 如 性 能 指标 是 否 满足 用 户 要 求 , 用 户 是 否 签字 确 
认 。 验 收 测试 是 否 完成 ,用 户 是 否 签字 确认 。 后 续 的 试 运行 期 的 方案 是 否 完成 ,用 户 是 否 同 
意 ,是 否 有 明确 的 截至 条 件 等 。 

以 上 从 一 个 测试 管理 者 的 角度 分 析 了 如 何 对 软件 测试 工作 进行 监控 。 需 要 强调 的 是 : 

(1) 测试 过 程 监控 是 一 项 日 常 的 工作 。 

这 份 工作 要 在 平时 不 停 地 进行 ,才能 有 效 地 改善 产品 的 质量 ,而 不 是 一 时 心血 来 潮 的 意气 
之 举 。 

(2) 监控 的 目的 是 为 了 解决 问题 ,而 不 是 发 现 问题 。 

监控 的 目的 不 是 为 了 证 明 我 们 的 能 力 , 而 是 为 了 能 够 持续 不 断 地 提高 软件 开发 的 能 力 ,能 
够 持续 改进 ,所 以 发 现 问题 并 不 是 目的 ,解决 问题 才 是 根本 。 

(3) 对 问题 的 判断 要 准确 ,可 验证 。 

作为 测试 的 管理 者 , 当 发 现 问题 的 时 候 一 定 要 判断 准确 ,而 且 经 得 起 复查 ,这 样 才能 避免 
不 必要 的 麻烦 ,才能 将 更 多 的 精力 投入 到 处 理事 情 本身 的 工作 中 。 

(4) 质量 的 提高 ,工作 的 改进 是 一 个 渐进 的 过 程 , 绝 不 能 一 跤 而 就 。 

对 于 一 个 不 太 成 熟 的 测试 组 ,测试 管理 者 通过 监控 可 能 发 现 很 多 的 问题 ,这 时 不 能 太 急 
躁 ,要 心平 气 和 ,需要 一 个 逐步 改进 的 过 程 。 


(5) 通过 对 测试 过 程 的 监控 和 分 析 , 要 及 时 调整 测试 计划 , 先 解 决 主要 的 问题 ,而 不 是 头 
痛 医 头 , 脚 痛 医 脚 。 


10.4 测试 文档 


每 一 个 测试 项 目 在 测试 过 程 中 都 会 产生 很 多 文档 ,软件 测试 文档 是 软件 工程 文档 的 重要 
组 成 部 分 ,可 以 作为 软件 测试 过 程 中 各 阶段 的 工作 成 果 和 结束 标准 ,提高 测试 过 程 的 可 视 性 和 
可 管理 性 ,有 利于 对 软件 测试 过 程 进行 管理 。 此 外 ,软件 测试 文档 还 是 开展 软件 回归 测试 和 软 
件 测试 重用 的 基础 。 

软件 测试 项 目 一 般 有 4 类 基本 测试 文档 ,但 由 于 测试 项 目的 要 求 不 同 、 测 试 过 程 管理 上 的 
差异 等 原因 ,测试 文档 类 型 和 数量 可 能 存在 不 同 。 

。 测试 计划 文档 

。 测试 方案 文档 

。 测试 用 例文 档 

。 测试 报告 文档 

下 面 分 别 予 以 说 明 。 

(1) 测试 计划 文档 记录 了 软件 测试 计划 阶段 的 主要 成 果 , 本 章 前 面 已 经 详细 讨论 ,这 里 作 
简单 的 总 结 性 重复 。 测 试 计划 文档 主要 包含 如 下 内 容 : 测试 范围 和 总 体 技术 要 求 、 测 试 目 的 、 
测试 方法 、 回 归 测 试 的 技术 要 求 ,测试 通过 /失败 的 标准 、 测 试 终止 准则 , 需 测试 的 软件 功能 和 
性 能 ,明确 了 测试 的 资源 要 求 、 人 员 要 求 和 任务 、 进 度 安排 ,对 测试 过 程 的 质量 保证 和 配置 管理 
工作 进行 明确 规定 ,应 交付 的 测试 工作 产品 。 

由 于 要 测试 的 内 容 可 能 涉及 软件 的 需求 和 软件 的 设计 ,因此 必须 及 早 开始 测试 计划 的 编 
写 工 作 。 不 应 在 着 手 测试 时 才 开 始 考虑 测试 计划 。 通 常 ,测试 计划 的 编写 从 需求 分 析 阶 段 开 
始 ,到 软件 设计 阶段 结束 时 完成 。 

(2) 测试 方案 文档 是 涉及 测试 阶段 的 测试 文档 ,指明 为 完成 软件 测试 而 进行 的 设计 测试 
方法 的 细节 文档 ,主要 包含 如 下 内 容 : 概述 (被 测 对 象 的 需求 要 素 、 测 试 设计 准则 )、 应 测试 的 
特性 ,测试 需求 (确定 测试 的 各 种 需求 因素 ,包括 环境 要 求 被 测 对 象 要 求 ,测试 工具 需求 ,测试 
数据 准备 等 ) ,测试 设计 (包括 测试 用 例 、 测 试 工具 、 测 试 代码 的 设计 思路 和 设计 准则 )。 

(3) 测试 用 例文 档 是 实现 测试 阶段 的 测试 文档 ,测试 用 例 的 好 坏 决 定 着 测试 工作 的 效率 ， 
选择 合适 的 测试 用 例 是 作 好 测试 工作 的 关键 。 测 试用 例文 档 包含 如 下 内 容 : 测试 项 目 、 用 例 
编号 ,用例 级 别 . 步 又、 输入 值 . 预 期 输出 值 . 实 测 结果 等 。 

(4) 测试 报告 文档 是 指明 执行 测试 结果 的 文档 ,主要 包含 如 下 内 容 : 测试 时 间 、 人 员 、 产 
品 、 版 本 测试 环境 配置 .测试 最 终 发 现 的 问题 .已 经 修正 的 问题 .遗留 问题 、 测 试 结果 统计 ,总 
结 和 评价 等 。 


10.5 软件 配置 管理 


1. 配置 管理 简介 
配置 管理 是 通过 对 在 软件 生命 周期 的 不 同时 间 点 上 的 软件 配置 进行 标识 ,并 对 这 些 被 标 
识 的 软件 配置 项 的 更 改进 行 系统 控制 ,从 而 达到 保证 软件 产品 的 完整 性 和 可 漳 性 的 过 程 。 


关于 配置 管理 的 几 个 术语 有 : 

(1) 配置 项 : 凡是 纳入 配置 管理 范畴 的 工作 成 果 ( 工 作 产品 ) 统 称 为 配置 项 (Configuration 
Item, CD ,配置 项 逻辑 上 组 成 软件 系统 的 各 组 成 部 分 。 每 个 配置 项 的 主要 属性 有 名 称 、 标 识 
符 ,文件 状态 、 版 本 、 作 者 ,日 期 等 。 配置 项 主要 有 两 大 类 : 

@ 属于 产品 组 成 部 分 的 工作 成 果 , 例 如 需求 文档 、 设 计 文 档 、 源 代码 ,测试 用 例 等 。 

@ 在 管理 过 程 中 产生 的 文档 ,例如 各 种 计划 、 监 控 报 告 等 。 这 些 文档 虽然 不 是 产品 的 组 
成 部 分 ,但 是 值得 保存 。 

(2) 基线 : 在 配置 管理 系统 中 ,基线 就 是 配置 项 在 其 生命 周期 的 不 同时 间 点 上 通过 正式 
评审 而 进入 正式 受 控 的 一 种 状态 ,每 一 个 基线 都 是 其 下 一 步 开 发 的 基准 。 

(3) 版 本 : 版 本 是 表示 一 个 配置 项 具有 一 组 定义 的 功能 的 一 种 标识 。 随 着 功能 的 增加 ， 
修改 或 删除 ,配置 项 的 版 本 随 之 演变 。 版 本 以 版 本 号 进行 标识 。 

配置 管理 工作 的 主要 内 容 有 识别 配置 项 .建立 配置 管理 系统 、 建 立 基线 .配置 状态 报告 和 
配置 审计 、 变 更 控制 管理 。 

软件 测试 过 程 中 的 工作 成 果 一 般 包括 测试 计划 ,测试 方案 、 测 试用 例 、 测 试 报告 测试 工具 
等 。 测 试 人 员 在 软件 配置 管理 中 的 工作 主要 是 根据 配置 管理 计划 和 相关 规定 ,提交 测试 配置 
项 和 测试 基线 ; 负责 软件 变更 的 测试 验证 。 另 外 ,在 对 测试 中 发 现 的 缺陷 进行 修改 时 ,需要 配 
置 管理 系统 协助 对 被 修改 的 软件 进行 版 本 控制 。 下 面 重 点 阐述 软件 测试 中 的 配置 管理 。 

2. 测试 配置 管理 

运用 过 程 方法 和 系统 方法 来 建立 软件 测试 管理 体系 .也 就 是 把 测试 管理 作为 一 个 系统 ,对 
组 成 这 个 系统 的 过 程 加 以 识别 和 管理 ,以 实现 设 定 的 系统 目标 。 同 时 要 使 测试 过 程 各 活动 协 
同 工 作 、 互 相 促进 ,其 主要 目标 是 在 设 定 的 条 件 限 制 下 , 尽 可 能 发 现 和 排除 软件 缺陷 。 测 试 配 
置 管理 是 软件 配置 管理 的 子 集 , 作 用 于 测试 的 各 个 阶段 。 其 管理 对 象 包 括 测试 计划 测试 方 
案 .测试 用 例 .测试 的 软件 版 本 ,测试 工具 及 环境 、 测 试 结果 等 。 软 件 测 试 配置 管理 需要 关注 以 
下 内 容 : 

1) 目标 

(1) 控制 和 审计 测试 活动 的 变更 ; 

(2) 在 测试 项 目的 里 程 碑 点 建立 相应 的 基线 ; 

(3) 记录 和 跟踪 测试 活动 变更 请 求 ; 

(4) 相应 的 软件 测试 活动 或 产品 被 标识 、 控 制 ,并 是 可 用 的 。 

2) 承诺 

承诺 1: 每 个 测试 项 目的 配置 管理 责任 明确 ; 

承诺 2: 配置 管理 贯穿 项 目的 整个 测试 活动 ; 

承诺 3: 配置 管理 应 用 于 所 有 的 测试 配置 项 ,包括 支持 工具 ; 

承诺 4: 建立 配置 库 和 基线 库 (Baseline Repository); 

承诺 5: 定期 评审 基线 库 内 容 和 测试 配置 项 活动 。 

3) 需要 纳入 配置 管理 的 项 

测试 过 程 中 会 产生 许 许 多 多 的 工作 产品 .例如 测试 计划 文档 、 测 试用 例 以 及 自动 化 测试 执 
行 脚本 和 测试 缺陷 数据 等 ,都 应 当 被 保存 起 来 ,以 便 查阅 和 修改 。 这 些 纳 入 配置 管理 范畴 的 工 
作 产品 均 是 配置 项 。 要 进行 管理 的 配置 项 还 包括 : 测试 合同 相关 信息 ,如 《软件 测试 技术 合 
同 》《 软 件 委托 测试 合同 》 和 《保密 合同 》; 被 测 软件 相关 资源 ,如 《用 户 手 册 》《 规 格 说 明 》 等 ; 


测试 文档 模板 以 及 测试 过 程 中 产生 的 系列 文档 和 测试 数据 。 

在 确定 每 一 基线 时 ,把 基线 要 求 受 控 的 软件 实体 标识 为 软件 配置 管理 项 ,并 为 每 个 软件 配 
置 管理 项 赋予 唯一 的 标识 符 ; 要 确定 全 部 文档 的 格式 、 内 容 和 控制 机 制 , 以 便 在 配置 管理 各 层 
次 中 追溯 ; 用 一 种 编号 法 提供 软件 配置 管理 项 的 信息 ,以 便 对 全 部 产品 文档 和 介质 指定 合适 
的 标识 号 ; 标识 方式 要 有 利于 软件 配置 管理 项 的 状态 控制 ,便于 增 、 删 和 更 改 。 

4) 测试 过 程 角色 和 活动 

(1) 软件 测试 计划 阶段 。 

软件 测试 角色 : 制定 测试 计划 与 分 析 。 

输入 : 软件 测试 的 方法 与 规范 ; 软件 需求 规格 说 明 ; 软件 设计 说 明 ( 概 要 设计 说 明和 详细 
设计 说 明 );《 软 件 用 户 手 册 》。 

输出 : 软件 测试 计划 。 

(2) 软件 测试 过 程 设计 。 

软件 测试 角色 : 测试 过 程 设 计 。 

输入 : 测试 方法 和 规范 ; 软件 测试 计划 。 

输出 : 软件 测试 步骤 ; 软件 测试 基准 ; 软件 测试 用 例 。 

(3) 软件 测试 实施 。 

软件 测试 角色 : 软件 测试 实施 。 

输入 : 测试 方法 和 规范 ; 软件 测试 计划 ; 软件 测试 用 例 。 

输出 : 测试 运行 结果 表示 ; 测试 自动 化 脚本 /测试 数据 ; 测试 日 志 ; 软件 问题 报告 。 

(4) 软件 测试 评估 。 

测试 角色 : 软件 测试 评估 。 

输入 :《 软 件 用 户 手 册 》; 软件 测试 文档 ; 软件 测试 配置 ; 软件 测试 记录 。 

输出 : 软件 测试 报告 ,包括 测试 结果 的 统计 信息 ,测试 结果 的 分 析 / 评 价 。 

基于 以 上 的 测试 过 程 和 角色 分 析 , 我 们 了 解 到 在 测试 过 程 中 涉及 很 多 的 配置 项 管理 工作 ， 
需要 配置 管理 工作 的 全 过 程 支持 。 

5) 测试 配置 项 状态 变迁 规则 

配置 项 的 状态 一 般 有 三 种 :“ 草 稿 (Draft)”、“ 正 式 发 布 (Released)” 和 “正在 修改 
(changing)”。 

测试 配置 项 刚 纳入 版 本 控制 时 其 状态 为 “草稿 ", 有 时 其 状态 可 为 “正式 发 布 ”, 视 情况 而 
定 。 状 态 为 “草稿 "的 这 些 测试 配置 项 通过 修改 并 评审 (或 审批 ) 后 ,其 状态 变 为 “正式 发 布 ”。 
此 后 若 更 改 配置 项 ,必须 依照 “变更 控制 规程 ?执行 ,其 状态 变 为 “正在 修改 ”。 当 配置 项 修改 完 
毕 并 重新 通过 评审 (或 审批 ) 时 ,其 状态 又 变 为 “正式 发 布 ", 如 此 循环 。 配 制 项 的 版 本 号 与 配置 
项 的 状态 紧密 相关 。 

6) 测试 配置 管理 步骤 

(1) 根据 软件 测试 的 过 程 标识 配置 管理 项 并 创建 相应 的 配置 库 , 并 为 每 个 用 户 分 配 操作 
权限 。 一 般 地 ,项 目 用 户 拥有 Add Checkin/Checkout 等 权限 ,但 是 不 能 拥有 “删除 ”权限 。 随 
后 由 配置 管理 员 制 定 并 执行 更 改 申请 流程 ,文档 更 改 控制 流程 以 实施 配置 控制 ,将 相应 的 配制 
管理 项 添加 到 配置 管理 工具 中 进行 管理 ,涉及 的 配置 管理 工作 包括 

@ 测试 项 目 组 成 员 根据 自己 的 权限 操作 配置 库 ,例如 Add、Checkin/Checkout 等 ,对 配置 
管理 项 进行 操作 。 


@ 配置 管理 员 根据 * 基 线 计划 ?创建 与 维护 基线 “冻结 配置 项 及 进行 控制 变更 。 

@ 配置 管理 员 定期 清除 配置 库 里 的 垃圾 文件 。 

@ 配置 管理 员 定期 备份 配置 库 。 

@ 配置 管理 员 为 每 一 配置 项 指定 相应 的 标识 。 

制定 基线 计划 。 配 置 管理 员 确 定 每 个 基线 的 名 称 ( 标 识 符 ) 以 及 主要 配置 项 ,估计 每 个 
基线 建立 和 提升 、 推 荐 的 时 间 。 

(2) 确定 配置 过 程 所 需 的 准则 和 方法 ,制定 配置 过 程 的 流程 ,以 及 监视 .测量 和 控制 的 准 
则 和 方法 。 

(3) 对 于 加 入 配置 管理 的 文档 数据 和 程序 (脚本 ?项 目 组 成 员 使 用 配置 管理 软件 的 
Checkout/Checkin 功能 ,可 以 自由 修改 处 于 “草稿 ”状态 的 配置 项 (不 受 变 更 控制 约束 ), 并 指 
定 其 版 本 号 。 当 项 目 组 成 员 进行 Checkout/Checkin 操作 时 ,必须 为 每 一 次 的 操作 做 一 次 注 
释 , 以 方便 其 他 人 员 对 此 文档 或 者 数据 或 脚本 的 操作 。 如 果 配 置 项 是 技术 文档 , 则 需要 接受 技 
术 评 审 。 如 果 配 置 项 是 计划 ”这 类 文档 , 则 需要 项 目 经 理 的 审批 。 如 果 配 置 项 通过 了 技术 评 
审 或 领导 审批 , 则 配置 管理 员 或 项 目 组 成 员 应 予以 标识 。 例 如 在 ClearCase LT 中 Check-out 
一 个 文件 时 ,ClearCase 就 会 在 视图 中 创建 该 文件 的 一 个 可 编辑 的 版 本 ,可 以 对 该 文件 进行 修 
改 ; Check-in 一 个 文件 时 ,ClearCase 就 在 VOB 中 创建 该 文件 的 一 个 新 的 永久 的 版 本 ,本 地 
视图 中 对 应 的 文件 就 会 变 成 只 读 属 性 ,无 法 修改 。Check-out 时 有 两 种 类 型 的 检 出 操作 : 保 
留 型 检 出 和 非 保留 型 检 出 。 保 留 型 检 出 操作 意味 着 检 出 者 能 够 被 保证 第 一 个 做 检 入 操作 。 
非 保留 型 检 出 并 不 保证 你 是 下 一 个 检 和 操作 者 。 对 于 同一 文件 ,可 以 存在 任意 个 数 的 非 保 
留 型 检 出 。 

(4) 对 于 需要 变更 的 配置 项 ,如 测试 用 例 ,测试 数据 .自动 化 脚本 等 ,应 按照 配置 项 变迁 更 
改 规则 进行 , 即 等 待 变更 的 配置 项 状态 为 “正式 发 布 "或 者 该 配置 项 已 经 成 为 某 个 基线 的 一 部 
分 ( 即 被 冻结 ”>) 。 此 时 对 其 变更 的 主要 步骤 如 下 : 

Q@ 变更 申请 。 变 更 申请 人 提交 变更 申请 ,重点 说 明 * 变 更 内 容 ” 和 "变更 原因 ”。 变 更 申请 
人 员 必 须 是 测试 项 目的 成 员 。 在 此 的 变更 可 能 涉及 《软件 测试 计划 》《 软 件 测试 用 例 》《 自 动 
化 执行 脚本 》 以 及 《测试 报告 等 。 

@ 审批 变更 请 求 。 当 对 已 经 做 了 变更 的 配置 项 进行 再 次 变更 时 ,需要 再 次 进行 变更 审 
批 ,并 分 析 此 变更 对 项 目 造成 的 影响 。 如 果 同 意 变更 , 则 转向 步骤 @ 。 

@ 安排 变更 任务 。 指 定 变 更 执行 人 、 安 排 任务 。 

@ 执行 变更 任务 。 变 更 人 根据 安排 的 任务 ,修改 配置 项 。 管 理 员 监督 变更 任务 的 执行 ， 
如 检查 变更 内 容 是 否 按时 按 量 完 成 等 。 

@@ 对 变更 后 的 配置 项 重新 进行 技术 评审 。 通 过 审批 后 转向 步骤 @, 否 则 转向 步骤 @( 重 
新 修改 )。 

结束 变更 ,此 配置 管理 项 成 为 “正式 发 布 ?或 “冻结 ”。 

当 所 有 变更 后 的 配置 项 都 通过 了 审批 ,这 些 配 置 项 的 状态 从 * 正 在 修改 ?变迁 为 “正式 
发 布 ”。 

3. 软件 配置 管理 工具 

软件 配置 管理 工具 主要 有 Rational ClearCase、 Borland StarTeam ,PVCS、 Visual SourceSafe、 
CVS 和 SVN 等 。 

SourceSafe 是 Microsoft 公司 推出 的 配置 管理 工具 ,是 Visual Studio 的 套件 之 一 。 


SourceSafe 是 比较 常用 的 配置 管理 工具 之 一 ,是 通过 “共享 目录 ”方式 存储 文件 的 ,因此 适合 于 
局 域 网 内 的 用 户 群 ,不 适合 于 通过 Internet 连接 的 用 户 群 。 

SourceSafe 的 操作 主要 涉及 两 个 部 分 : 服务 器 端 和 客户 端 。 

服务 器 端的 操作 有 : 

。 创建 并 打开 一 个 VSS 数据 库 ; 

。 为 新 创建 的 数据 库 建 立 用 户 ， 

。 为 建立 的 用 户 设置 用 户 权限 ; 

。 备份 .恢复 数据 库 信 息 。 

客户 端的 操作 有 : 

。 在 新 建 的 数据 库 中 创建 项 目 文件 夹 (PROJECT); 

。 在 PROJECT 中 添加 、 删 除 文件 (彻底 删除 权限 ); 

。 CHECK OUT、CHECK IN 操作 ; 

。 GET LAST VERSION 操作 ; 

。 创建 CHECK OUT 的 高 层 报告 ; 

。 查看 文件 历史 记录 。 


10.6 测试 与 风险 


1. 项 目 风险 

1) 项 目 风险 的 定义 和 分 类 

软件 项 目 风险 是 指 在 软件 开发 过 程 中 发 生 的 技术 质量 .成 本 和 进度 等 方面 的 问题 以 及 这 
些 问 题 对 软件 项 目的 影响 。 软 件 项 目 风 险 会 影响 项 目 计划 的 实现 ,如 果 项 目 风 险 变 成 现实 ,就 
有 可 能 影响 项 目的 进度 ,增加 项 目的 成 本 ,甚至 使 软件 项 目 不 能 实现 。 如 果 对 项 目 进 行 风险 管 
理 ,就 可 以 最 大 限度 地 减少 风险 的 发 生 。 

根据 风险 内 容 , 可 以 将 风险 分 为 : 

(1) 项 目 管理 风险 。 如 用 户 需求 不 明确 ,项 目 组 未 正确 理解 客户 需求 ,缺乏 项 目 管理 经 
验 , 资 源 冲 突 , 进 度 延 误 等 。 

(2) 技术 或 质量 风险 。 如 使 用 未 经 验证 的 或 不 成 熟 的 技术 ,变更 技术 方案 ,技术 培训 不 
足 , 软 件 产品 出 现 性 能 问题 等 。 

(3) 商业 风险 。 如 市 场 不 清楚 ,用 户 能 否 接受 并 采用 产品 或 服务 ,市 场 不 稳定 等 。 

(4) 战略 风险 。 公 司 的 经 营 战略 调整 时 所 产生 的 风险 。 

2) 风险 管理 

风险 管理 涉及 的 主要 过 程 包括 风险 识别 ,定性 定量 风险 分 析 , 风 险 应 对 计划 制定 和 风险 
监控 。 

(1) 风险 识别 。 风 险 识别 在 项 目的 开始 时 就 要 进行 ,并 在 项 目 执行 中 不 断 进 行 更 新 。 就 
是 说 ,在 项 目的 整个 生命 周期 内 ,风险 识别 是 一 个 连续 的 过 程 。 

(2) 风险 应 对 计划 制定 。 针 对 定性 风险 分 析 和 定量 风险 分 析 的 结果 ,为 降低 项 目 风险 的 
负面 影响 制定 风险 应 对 策略 和 技术 手段 的 过 程 。 风 险 应 对 计划 依据 风险 的 优先 级 水 平 处 理 风 
险 , 一 旦 发 生 风 险 事件 ,就 实施 应 对 计划 。 

(3) 风险 应 对 策略 。 包 括 风险 规避 ,风险 转移 、 风 险 降 低 、 风 险 接受 。 


(4) 风险 监控 。 对 整个 项 目 管理 过 程 中 的 风险 进行 应 对 。 该 过 程 的 输出 包括 应 对 风险 的 
纠正 措施 以 及 风险 管理 计划 的 更 新 。 
软件 开发 是 高 风险 的 活动 。 如 果 项 目 采 取 积 极 风险 管理 的 方式 ,就 可 以 避免 或 降低 许多 
风险 ,而 这 些 风 险 如 果 没 有 处 理 好 ,就 可 能 使 项 目 陷 入 瘫痪 中 。 因 此 在 软件 项 目 管理 中 还 要 进 
行 风险 跟踪 。 对 辨识 后 的 风险 在 系统 开发 过 程 中 进行 跟踪 管理 ,确定 还 会 有 哪些 变化 ,以 便 及 
时 修正 计划 。 具 体内 容 包 括 : 
。 实施 对 重要 风险 的 跟踪 ; 
。 每 周 或 每 月 对 风险 进行 一 次 跟踪 ; 
。 风险 跟踪 应 与 项 目 管理 中 的 整体 跟踪 管理 相 一 致 ; 
。 风险 项 目 应 随 着 时 间 的 不 同 而 相应 地 变化 ; 
。 通过 风险 跟踪 ,进一步 对 风险 进行 管理 ,从 而 保证 项 目 计划 的 如 期 完成 。 
2. 软件 测试 风险 
美国 IEEE 829 一 1998《 软 件 测试 文档 编制 ) 标 准 中 ,在 测试 计划 的 模板 中 有 一 项 为 “风险 
与 应 急 措 施 ”。 这 表明 软件 测试 风险 管理 是 很 重要 的 一 项 工作 。 
软件 测试 的 风险 是 指 软件 测试 过 程 中 出 现 的 或 潜在 的 问题 ,造成 的 原因 主要 是 测试 计划 
的 不 充分 ,测试 方法 有 误 或 测试 过 程 的 偏离 ,造成 测试 的 不 足以 及 结果 不 准确 。 测 试 的 不 成 功 
导致 软件 交付 潜藏 着 问题 ,一 旦 在 运行 时 爆发 ,会 带 来 很 大 的 商业 风险 。 在 软件 测试 过 程 中 要 
善于 识别 风险 ,制定 风险 的 缓解 计划 并 实施 跟踪 管理 。 
测试 计划 的 风险 一 般 是 指 测试 进度 滞后 或 出 现 非 计 划 事 件 , 即 针对 计划 好 的 测试 工作 造 
成 消极 影响 的 所 有 因素 ,对 于 计划 风险 分 析 的 工作 是 制定 计划 风险 发 生 时 应 采取 的 应 对 措施 。 
一 些 常见 的 计划 风险 包括 交付 日 期 ,测试 需求 ,测试 范围 ,测试 资源 、 人 员 的 能 力 ,测试 预算 、 测 
试 环境 ,测试 支持 ,测试 工具 ,测试 技术 、 人 员 流 失 等 。 其 中 ,交付 日 期 的 风险 是 主要 风险 之 一 。 
测试 未 按 计 划 完 成 ,发 布 日 期 推迟 ,影响 对 客户 交付 产品 的 承诺 ,管理 的 可 信和 度 和 公司 的 信誉 
都 要 受到 考验 ,同时 也 受到 竞争 对 手 的 威胁 。 交 付 日 期 的 滞后 ,也 可 能 是 已 经 耗 尽 了 所 有 的 资 
源 。 计 划 风 险 分 析 所 做 的 工作 重点 不 在 于 分 析 风 险 产 生 的 原因 ,重点 应 放 在 提前 制定 应 对 措 
施 来 应 对 风险 发 生 。 当 测试 计划 风险 发 生 时 ,可 能 采用 的 应 对 措施 ,如 采取 缩小 测试 范围 、 增 
加 所 需 资源 .减少 过 程 活动 等 。 假 如 在 软件 项 目 开发 接近 尾声 时 ,用 户 提出 重要 需求 变动 ,可 
以 考虑 使 用 如 下 的 应 对 措施 : 
。 措施 1: 增加 资源 。 请 求 用 户 或 公司 为 测试 工作 提供 更 多 的 支持 。 
。 措施 2: 缩小 范围 。 决 定 在 后 续 发 布 中 实现 较 低 优先 级 的 软件 特性 。 
。 措施 3: 减少 质量 过 程 。 依 据 风 险 分 析 结果 减少 风险 级 别 低 的 软件 特征 的 测试 或 暂时 
不 测试 。 
上 述 列举 的 应 对 措施 要 涉及 有 关 方 面 的 妥协 。 如 果 没 有 测试 计划 风险 分 析 和 应 对 措施 处 
理 风 险 ,开发 者 和 测试 人 员 采 取 的 措施 比较 匆忙 ,不 利于 将 风险 的 损失 控制 到 最 小 。 因 此 , 软 
件 风 险 分 析 和 测试 计划 风险 分 析 与 应 对 措施 是 相辅相成 的 。 
风险 的 应 对 措施 是 建立 在 风险 分 析 、 评 估 的 基础 上 ,主要 的 应 对 措施 有 : 
。 采取 措施 避免 可 以 避免 的 风险 ,如 在 测试 环境 设置 好 后 ,可 通过 事先 列 出 的 checklist 
进行 逐条 检查 ,检查 其 是 否 满足 要 求 。 
。 风险 转移 。 有 些 风 险 可 能 带 来 的 后 果 非 常 严重 ,可 采取 措施 将 其 转换 为 不 会 引起 严重 
后 果 的 低 风险 。 如 产品 发 布 前 忽然 发 现 某 个 不 是 很 重要 的 新 功能 给 原 系 统 带 来 一 个 


严重 的 bug( 缺 陷 ), 这 时 处 理 这 个 缺陷 所 带 来 的 风险 就 很 大 ,应 对 策略 是 去 掉 那 个 新 
功能 ,转移 这 种 风险 。 

。 有 些 风险 不 可 避免 ,就 设法 降低 风险 ,如 * 程 序 中 未 发 现 的 缺陷 ?这 种 风险 总 是 存在 ,就 
要 通过 提高 测试 用 例 的 覆盖 率 ( 如 达到 99%) 来 降低 这 种 风险 。 

。 为 了 避免 转移 .降低 风险 ,事先 应 做 好 风险 管理 计划 ,同时 对 风险 的 处 理 还 应 制定 应 
对 缓解 计划 和 方案 ,并 实施 跟踪 管理 。 

软件 测试 项 目 存在 风险 , 若 预先 重视 风险 的 分 析 、` 评 估 , 并 采取 风险 处 理 措施 ,就 可 以 最 大 

限度 地 减少 风险 的 发 生 或 降低 风险 带 来 的 损失 。 


10.7 缺陷 管理 


缺陷 管理 是 测试 工作 的 一 个 重要 部 分 ,测试 的 目的 是 为 了 尽早 发 现 软件 系统 中 的 缺陷 , 因 
此 ,对 缺陷 进行 管理 ,确保 每 个 被 发 现 的 缺陷 都 能 够 及 时 得 到 处 理 是 测试 工作 的 一 项 重要 内 
容 。 在 实际 软件 测试 过 程 中 ,对 于 每 个 错误 或 缺陷 都 要 经 过 测试 .确认 、 修 复 、 验 证 等 的 管理 过 
程 。 软 件 测试 的 本 身 是 发 现 软件 的 缺陷 ,并 在 软件 测试 过 程 中 对 发 现 的 缺陷 进行 记录 ,而 缺陷 
管理 是 对 缺陷 进行 跟踪 ,目的 是 将 软件 缺陷 在 软件 中 真正 地 消除 。 

1. 软件 缺陷 的 属性 描述 

软件 缺陷 是 软件 中 的 错误 表现 ,例如 语法 错误 、 拼 写 错误 或 者 是 一 个 不 正确 的 程序 语句 等 
均 可 能 导致 缺陷 的 产生 ,这 些 错 误 也 可 能 出 现在 设计 中 ,其 至 在 需求 .规格 说 明 或 其 他 的 文档 
中 。 为 了 对 缺陷 进行 管理 ,首先 需要 定义 软件 缺陷 的 属性 。 

软件 缺陷 的 属性 主要 有 缺陷 标识 缺陷 类 型 缺陷 严重 程度 、 缺 陷 优先 级 、 缺 陷 状 态 、 缺 陷 
起 源 、 缺 陷 来 源 、 缺 陷 原因 。 

(1) 缺陷 标识 是 标记 某 个 缺陷 的 一 组 符号 。 每 个 缺陷 必须 有 一 个 唯一 的 标识 。 

(2) 缺陷 类 型 是 根据 缺陷 的 自然 属性 划分 的 缺陷 种 类 ,如 表 10-1 所 示 。 

表 10-1 软件 缺陷 类 型 列表 


缺陷 类 型 编号 | 缺 陷 类 型 描述 
影响 了 重要 的 特性 .用 户 界 而 .产品 接口 .硬件 结构 接口 和 全 局 数 
001 | Function( 功 能 ) 据 结构 。 并 且 设计 文档 需要 正式 的 变更 。 如 逻辑 .指针 .循环 、 吉 
归功 能 等 缺陷 
要 修改 少量 代码 ,如 初始 化 或 控制 闫 。 如 声明 .重复 命名 .范围 、 
002 Assignment( 赋 值 ) 限定 等 缺陷 
Pr 与 组 件 .和 和 序 、 用 委 ,人 不 
004 | Build/package/merge | 由 于 配置 库 、 变 更 管理 或 版 本 控制 引起 的 错误 


( 联 编 打包 ) 
005 Documentation( 文 档 ) | 影响 发 布 和 维护 ,包括 注释 
User Interface (用 户 | 人 机 交互 特性 : 屏幕 格式 ,确认 用 户 输入 ,功能 有 效 性 ,页 面 排版 


006 


界面 ) 等 方面 的 缺陷 
007 Performance( 性 能 ) 不 满足 系统 可 测量 的 属性 值 , 如 执行 时 间 , 事 务 处 理 速率 等 
008 Norms( 标 准 ) 不 符合 各 种 标准 的 要 求 ,如 编码 标准 \ 设 计 符号 等 


009 Environment( 环 境 ) 设计 ,编译 ,其 他 支持 系统 问题 


(3) 缺陷 严重 程度 是 指 因 缺陷 引起 的 故障 对 软件 产品 的 影响 程度 ,如 表 10-2 所 示 。 


表 10-2 软件 缺陷 严重 程度 列表 


缺陷 严重 程度 描 述 

严重 缺陷 (Critical) 不 能 执行 正常 工作 功能 或 重要 功能 。 或 者 危及 人 身 安全 

较 大 缺陷 (MajonD) 严重 地 影响 系统 要 求 或 基本 功能 的 实现 , 且 没 有 办 法 更 正 ( 重 新 安装 或 重新 启 
动 该 软件 不 属于 更 正 办 法 ) 

, 严重 地 影响 系统 要 求 或 基本 功能 的 实现 ,但 存在 合理 的 更 正 办 法 (重新 安装 或 

较 小 缺陷 (Minor) 四 
重新 启动 该 软件 不 属于 更 正 办 法 ) 

轻微 缺陷 (Cosmetic) 使 操作 者 不 方便 或 遇 到 麻烦 ,但 它 不 影响 执行 工作 功能 或 重要 功能 

其 他 缺陷 (Other) 其 他 错误 


(4) 缺陷 优先 级 是 指 缺 陷 必须 被 修复 的 紧急 程度 ,如 表 10-3 所 示 。 


缺陷 优先 级 


表 10-3 软件 缺陷 优先 级 列表 
描 述 


立即 解决 (Resolve Immediately) 缺陷 必须 被 立即 解决 


正常 排队 (Normal Queue) 


缺陷 需要 正常 排队 等 待 修复 或 列 人 软件 发 布 清单 


不 紧急 (Not Urgent) 


缺陷 可 以 在 方便 时 被 纠正 


(5) 缺陷 状态 是 指 缺 陷 通 过 一 个 跟踪 修复 过 程 的 进展 情况 ,如 表 10-4 所 示 。 


缺陷 状态 


表 10-4 软件 缺陷 状态 列表 
描 述 


已 提交 (Submitted) 或 New( 新 缺陷 ) | 已 提交 的 缺陷 


接受 (Accepted) 经 过 缺陷 评审 委员 会 的 确认 ,认为 缺陷 确实 存在 
分 配 (Assigned) 将 这 个 缺陷 分 配给 相关 的 开发 人 员 来 进行 修改 
E 解决 缺陷 问题 的 方法 已 经 找到 ,并 且 已 经 将 修改 后 的 代码 等 打上 
交付 (Delivered) 标签 ,交付 版 本 库 
打开 (Open) 确认 “提交 的 缺陷 ”, 等 待 处 理 
已 修改 (Fixed) 已 经 解决 的 缺陷 软件 融入 某 个 版 本 标签 ,交付 给 相关 的 测试 小 组 
进行 验证 测试 ,测试 通过 , 则 缺陷 状态 修改 为 已 修改 状态 
已 拒绝 (Rejected) 拒绝 “提交 的 缺陷 ”, 不 需要 修复 或 不 是 缺陷 
已 解决 (Resolved) 缺陷 被 修复 
已 关闭 (Closed) 确认 被 修复 的 缺陷 ,将 其 关闭 


表 10-4 中 的 缺陷 状态 是 缺陷 管理 过 程 中 的 主要 状态 ,或 者 是 在 缺陷 处 理 顺利 时 所 经 历 的 
状态 。 实 际 上 ,缺陷 还 有 其 他 一 些 状态 ,在 不 同 缺陷 跟踪 系统 里 状态 的 定义 也 存在 不 同 。 这 些 
状态 分 别 是 : 
。 Investigate( 调 查 ) : 当 缺 陷 分 配给 开发 人 员 时 ,开发 人 员 并 不 是 都 可 以 直接 找到 相关 
的 解决 方案 的 。 开 发 人 员 需 要 对 缺陷 和 引起 缺陷 的 原因 进行 调查 研究 ,这 时 可 以 将 缺 

。 Query&.Reply( 询 问 和 回答 ): 负责 缺陷 修改 的 工程 师 认 为 相关 的 缺陷 描述 信息 不 够 
明确 ,或 希望 得 到 更 多 和 缺陷 相关 的 配置 和 环境 条 件 ,或 引起 缺陷 时 系统 产生 的 调试 
命令 和 信息 等 。 


Declined( 拒 绝 ) : 缺陷 评审 委员 会 通过 相关 的 讨论 研究 ,认为 不 是 缺陷 。 或 通过 开发 
人 员 的 调查 研究 ,认为 不 是 缺陷 。 开 发 人 员 可 以 将 具体 的 理由 加 入 到 缺陷 描述 中 , 缺 
陷 评 审 委员 会 根据 此 将 缺陷 状态 修改 为 拒绝 状态 。 

Duplicate( 重 复 ): 缺陷 评审 委员 会 认为 这 个 缺陷 和 某 个 已 经 提交 的 缺陷 是 同一 个 问 
题 , 因 此 设置 为 重复 状态 。 

Defferred( 延 期 ) : 缺陷 不 在 当前 版 本 解决 。 

Unplanned( 无 计划 ): 在 用 户 需 求 中 没有 要 求 或 计划 。 

Invalid( 无 效 ) : 不 是 一 个 缺陷 。 

Wontfix( 不 修复 ) : 问题 永 不 被 修复 。 

Later( 推 迟 ) : 问题 不 会 在 这 个 版 本 中 解决 。 

Worksforme( 无 法 重 现 ): 缺陷 是 无 效 的 ,无 法 再 现 。 

Reassigned( 再 分 配 ): 缺陷 重新 分 配 。 

Verified( 已 经 验证 ): 缺陷 修改 后 被 验证 。 

。 Reopened( 再 打开 ): 重新 打开 缺陷 。 

(6) 缺陷 起 源 是 指 缺陷 引起 的 故障 或 事件 第 一 次 被 检测 到 的 阶段 ,如 表 10-5 所 示 。 


表 10-5 软件 缺陷 的 起 源 列 表 


缺陷 起 源 描 述 缺陷 起 源 描 述 
需求 (Requirement) 在 需求 阶段 发 现 的 缺陷 编码 (Code) 在 编码 阶段 发 现 的 缺陷 
架构 (Architecture) 在 构架 阶段 发 现 的 缺陷 测试 (Test) 在 测试 阶段 发 现 的 缺陷 
设计 (Design) 在 设计 阶段 发 现 的 缺陷 


(7) 缺陷 来 源 是 指 缺陷 所 在 的 地 方 , 如 文档 、 代 码 等 。 

(8) 缺陷 原因 是 指 发 生 错误 的 根本 因素 。 

2. 软件 缺陷 管理 流程 

软件 缺陷 管理 流程 一 般 会 包括 如 下 几 个 方面 : 

(1) 发 现 并 提交 缺陷 。 

(2) 分 析 和 定位 缺陷 。 

(3) 提请 修改 相应 的 软件 。 

(4) 修改 相应 的 软件 。 

(5) 验证 修改 。 

项 目 组 会 完整 地 记录 开发 过 程 中 的 缺陷 ,监控 缺陷 的 修改 过 程 ,并 验证 修改 缺陷 的 结果 。 
图 10-1 是 Bugzilla 缺陷 跟踪 系统 中 的 缺陷 跟踪 管理 流程 。 

3. 软件 缺陷 度量 

缺陷 度量 , 即 缺 陷 数 据 统 计 , 也 是 缺陷 跟踪 管理 系统 的 目标 。 一 般 而 言 ,生成 的 缺陷 数据 
统计 图 表 包 括 缺 陷 趋 势 图 、 缺 陷 分 布 图 等 。 

1) 缺陷 类 型 分 布 

通过 对 测试 出 来 的 缺陷 进行 分 类 , 按 其 类 型 分 布 , 找 出 关键 的 缺陷 类 型 ,进一步 分 析 其 产 
生 的 根源 ,从 而 有 针对 性 地 制定 改进 措施 。 

下 面 以 一 个 项 目的 系统 测试 缺陷 为 例 进 行 分 析 , 如 图 10-2 所 示 。 

从 系统 测试 故障 来 看 ,有 和 较 多 缺陷 是 由 接口 原因 造成 的 , 细 分 有 以 下 几 种 原因 : 


(1) 测试 人 员 提 交 bug- 
(2) 开发 人 员 提 交 bug 。 
(3) bug 的 owner 可 以 由 提交 者 指定 项 目 经 理 或 开发 者 。 
(4) bug 状 态 设 为 NEW 。 


一 | 提交 bug (1) 如 果 bug 是 自己 的 ， 则 接受 此 bug， 将 bug 状 态 置 为 
Accept 。 

(2) 如 果 bug 不 是 自己 的 ， 则 将 bug Reassigned 给 项 目 经 理 ， 
Newibug 再 由 项 目 经 理 进行 分 配 ，bug 的 状态 为 New 。 


| 


i 分 配 bug 
不 是 自己 的 bug| 一 - (1) Bug 的 属 主 处 理 问 题 后 ， 提 交 解 决 结论 及 方法 。 
(2) 解决 方法 填写 Additional Comments, 同时 可 以 创建 
Accept bug 附件 。 
全 (3) bug 状 态 设 为 Resolve，solution 根 据 解 决 情况 选择 : 
处 理 bug FIXED: 描 述 的 问题 已 经 修改 。 

[| INVALID: 描 述 的 问题 不 是 一 个 bug( 输 入 错误 后 ， 通 过 此 
项 来 取消 )。 
Resolve &fixed bug WONTFIX: 描 述 的 问题 将 永远 不 会 被 修复 。 
. LATER: 描 述 的 问题 将 不 会 在 产品 的 这 个 版 本 中 解决 。 
DUPLICATE: 描 述 的 问题 是 一 个 存在 的 bug 的 复 件 。 
验证 bug WORKSFORME: 所 有 要 重新 产生 这 个 bug 的 企图 是 无 效 的 。 
人 请 重新 分 配 这 个 bug, 而 现在 只 
把 它 归档 。 


Verified bug 
是 


关闭 bug 测试 人 员 验 证 已 修改 的 Bug。 
(1) 测试 人 员 查 询 开发 者 已 修改 的 bug, 即 Status 为 

" Resolved ”，Resolution 为 " Fixed ", 进行 重新 测试 。 
(2) 经 验证 无 误 后 ， 修 改 Resolution 为 VERIFIED 。 

(3) 若 还 有 问题 ，REOPENED 状 态 重新 变 为 " New " ,并 发 
邮件 通知 。 


如 还 有 问题 ， 
Reopened 


整个 产品 发 布 后 ， 才 可 以 由 测试 人 员 将 bug 的 状态 由 
Verified 修 改 为 CLOSED 。 
开发 调试 阶段 不 得 关闭 bug 。 


图 10-1 Bugzilla 缺陷 跟踪 管理 流程 


(1) 跨 项 目 间 的 接口 ,接口 设计 文档 的 更 改 没有 建立 互相 通知 的 机 制 ,导致 接口 问题 到 系 
统 测 试 时 候 才 暴露 出 来 。 

(2) 部 门 内 部 跨 子 系统 的 接口 ,由 于 本 项 系统 测试 缺陷 类 型 分 布 
目 设计 文档 是 按 功 能 规划 编写 的 ,而 不 是 按照 二 
产品 组 件 ,一 般 由 主要 承接 功能 工作 的 组 编写 并 加 虹 法 
该 文档 ,接口 内 容 可 能 不 为 其 他 开发 组 理解 并 入 各 


熟悉 ,导致 因 接口 问题 而 出 错 。 4% i 
(3) 系统 设计 基线 化 后 ,更 改 系统 接口 , 没 功能 口 构架 

有 走 严格 的 变更 流程 ,进行 波及 分 析 , 导 致 该 接 a 

口 变更 只 在 某 个 子 系统 中 被 修改 ,而 使 错误 遗 有 

漏 下 来 。 70% 


通过 上 述 分 析 , 可 以 有 针对 性 地 制定 改进 10-2 系统 测试 缺陷 类 型 分 布 举例 
建议 : 


(1) 对 接口 文档 的 评审 一 定 要 识别 受 影响 的 相关 干系 人 ,使 他 们 了 解 并 参与 接口 设计 的 
把 关 。 
(2) 对 基线 化 的 接口 设计 文档 的 变更 一 定 要 提交 变更 单 给 CCB( 变 更 配置 管理 委员 会 ) 决 
策 ,并 做 好 充分 的 波及 影响 分 析 , 以 便 同步 修改 所 有 关联 的 下 游 代 码 。 
(3) 概要 设计 文档 按 子 系统 规划 ,详细 设计 文档 按 模块 规划 ,通过 相关 组 参加 评审 协调 接 
口 设 计 。 
2) 缺陷 收敛 趋势 分 析 
缺陷 趋势 就 是 将 每 月 新 生成 的 缺陷 数 、 每 月 被 解决 的 缺陷 数 和 每 月 遗留 的 缺陷 数 标 成 一 
个 趋势 图 表 。 一 般 在 项 目的 开始 阶段 发 现 缺陷 数 曲线 会 旦 上 升 趋势 ,到 项 目 中 后 期 被 修复 缺 
陷 数 曲线 会 趋 于 上 升 ,而 发 现 缺陷 数 曲 线 应 总 体 趋 于 下 降 , 同 时 处 于 OPEN 状态 的 缺陷 也 应 
该 总 体 呈 下 降 趋 势 ; 到 项 目 最 后 ,三 条 曲线 都 趋向 于 0, 如 图 10-3 所 示 。 
缺陷 发 现 、 修 复 、 收 敛 趋势 
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图 10-3 缺陷 发 现 ,修复 和 收敛 趋势 图 


项 目 经 理会 持续 观察 这 张 图 表 , 确 保 项 目 健康 发 展 ,同时 通过 分 析 预 测 项 目测 试 缺陷 趋 于 
0 的 时 间 。 在 一 定 的 历史 经 验 的 基础 上 分 析 使 用 这 一 图 表 会 得 到 很 多 有 价值 的 信息 ,比如 说 ， 
可 分 析 开 发 和 测试 在 人 力 资源 的 配 比 上 是 否 恰当 ,可 以 分 析出 某 个 严重 的 缺陷 所 造成 的 项 目 
质量 的 波动 。 对 于 异常 的 波动 ,如 本 来 应 该 越 测 试 越 收敛 的 ,到 了 某 个 点 却 发 现 故障 数 反 而 呈 
上 升 趋势 ,那么 这 些 点 往往 有 一 些 特殊 事件 的 发 生 。 如 在 该 时 间 段 送 测 的 回归 版 本 增加 了 新 
的 功能 ,导致 缺陷 引入 ; 该 回归 版 本 开发 部 门 没 有 进行 集成 测试 就 直接 送 测 ; 等 等 。 当 然 ,这 
个 统计 周期 也 可 以 根据 我 们 的 项 目 实施 情况 进行 ,如 按照 回归 版 本 的 版 本 号 进行 统计 、 按 周 进 
行 统计 等 。 也 有 公司 把 缺陷 收敛 情况 当 作 判 断 版 本 是 否 可 以 最 终 外 发 的 一 个 标志 。 

通过 对 测试 缺陷 分 析 ,能 够 给 予 我 们 很 多 改进 研发 和 测试 工作 的 信息 。 当 然 , 这 种 分 析 来 
源 于 一 个 前 提 , 我 们 需要 规划 一 个 好 的 缺陷 管理 系统 ,满足 我 们 这 些 分 析 的 信息 需要 。 男 外 ， 
如 果 研 发 过 程 是 稳定 的 ,其 质量 表现 大 体 是 一 致 的 ,这 样 数据 反映 的 趋势 才 具 备 可 信和 度 。 

4. 缺陷 跟踪 管理 系统 

任何 一 个 缺陷 跟踪 管理 系统 的 核心 都 是 “缺陷 报告 "缺陷 报 告 是 缺陷 制造 者 和 缺陷 发 现 
者 之 间 沟 通 的 桥梁 ,所 以 ,软件 缺陷 必须 被 描述 清楚 。 软 件 缺 陷 的 详细 描述 由 三 部 分 组 成 : 操 
作 /再 现 步骤 ,期望 结 果 、 实 际 结果 。 


(1) 操作 /再 现 步骤 提供 了 如 何 重复 当前 缺陷 的 准确 描述 ,应 简明 清楚、 完备 和 准确 。 这 
些 信 息 对 开发 人 员 是 关键 的 , 视 为 修复 缺陷 的 向 导 , 开 发 人 员 有 时 抱怨 糟糕 的 缺陷 报告 ,问题 
往往 集中 在 此 。 

(2) 期 望 结 果 与 测试 用 例 标 准 或 设计 规格 说 明 书 及 用 户 需求 相 一 致 ,达到 软件 预期 功能 。 
测试 人 员 站 在 用 户 的 角度 要 对 其 进行 描述 , 它 提 供 了 验证 缺陷 的 依据 。 

(3) 实际 结果 是 测试 人 员 收 集 的 结果 和 信息 ,以 确认 缺陷 是 一 个 问题 ,并 标识 那些 影响 到 
缺陷 的 要 素 。 

一 份 好 的 缺陷 报告 记录 应 该 避免 各 种 重复 步骤 ,不 仅 包 括 了 期 望 结 果 、 实 际 结果 和 必要 的 
附件 ,还 提供 必要 的 数据 ,测试 环境 及 简要 的 分 析 。 

目前 市 面 上 主要 的 缺陷 跟踪 管理 软件 包括 IBM 的 Rational ClearQuest、Compuware 公司 
的 TrackRecord 软件 、Mozilla 公司 的 Bugzilla 软件 .MI 公司 的 TestDirector, 以 及 国内 微 创 公 
司 的 BMS 软件 ,这 些 软件 在 功能 上 各 有 特点 ,可 以 根据 实际 情况 选用 。 当 然 , 也 可 以 自己 开 
发 缺陷 跟踪 软件 。 


练习 


. 简 述 软件 测试 计划 包含 的 主要 内 容 。 

. 查阅 相关 资料 ,了 解 软 件 测试 的 工作 量 和 成 本 的 估算 过 程 。 

. 分 析 软 件 测 试 的 监控 过 程 。 

.以 一 个 具体 的 例子 来 描述 软件 测试 过 程 中 配置 管理 的 作用 。 
. 掌握 开源 缺陷 管理 工具 Bugzilla 并 描述 其 缺陷 跟踪 的 全 过 程 。 


an mo 


软件 测试 工具 


11.1 ”测试 工具 的 类 型 


在 软件 测试 过 程 中 合理 地 引入 测试 工具 ,能 够 加 快 测试 进度 ,提高 
测试 质量 ,实现 更 快 .更 好 地 开发 软件 产品 的 目标 。 不 同 的 测试 工具 支 
持 软件 测试 过 程 中 的 不 同方 面 。 有 些 工 具 只 支持 一 种 测试 活动 ,而 另 一 
些 工 具 可 以 支持 多 种 测试 活动 。 这 里 工具 的 分 类 是 根据 工具 的 作用 不 
同 但 关系 密切 的 活动 来 划分 的 。 一 些 商业 的 工具 提供 只 支持 一 种 类 型 
的 活动 ,而 另外 一 些 商 用 工具 可 以 提供 多 种 或 全 部 活动 的 工具 套件 。 

根据 软件 测试 过 程 中 的 不 同 任务 ,测试 工具 一 般 有 白 盒 测试 工具 、 
黑 盒 测试 工具 ,性 能 测试 工具 ,另外 还 有 用 于 测试 管理 (测试 流程 管理 、 
缺陷 跟踪 管理 ,测试 用 例 管理 ) 的 工具 。 目 前 测试 工具 很 多 ,基本 上 和 覆盖 
了 各 个 测试 阶段 。 按 照 工具 所 完成 的 任务 ,可 以 分 为 以 下 几 大 类 : 测试 
过 程 管理 工具 、 测 试 设计 工具 、 静 态 分 析 工 具 、 单 元 测试 工具 ,功能 ( 黑 
盒 ) 测 试 工 具 、 结 构 性 ( 白 盒 ) 测 试 工具 、 性 能 测试 工具 以 及 其 他 测试 工具 
等 。 下 面 就 一 些 典型 的 工具 的 类 型 进行 曾 述 。 


11.1.1 测试 管理 工具 


软件 测试 贯穿 于 整个 软件 开发 过 程 ,按照 工作 进行 的 先后 顺序 , 测 
试 过 程 可 分 为 制定 测试 计划 ,测试 分 析 和 设计 、 测 试 实施 、 跟 踪 缺陷 等 几 
个 阶段 。 在 每 个 阶段 ,都 有 一 些 数据 需要 保存 ,人 员 之 间 也 需要 进行 交 
互 。 测 试管 理工 具 就 是 一 种 用 于 满足 上 述 要 求 的 软件 工具 , 它 管理 整个 
测试 过 程 ,保存 在 测试 不 同 阶段 产生 的 文档 ,数据 ,协调 技术 人 员 之 间 的 
工作 。 

测试 过 程 管理 工具 一 般 都 会 包括 以 下 这 些 功能 : 管理 软件 需求 、 管 
理 测试 计划 、 管 理 测试 用 例 、 缺 陷 跟 踪 、 测 试 过 程 中 各 类 数据 的 统计 和 
汇总 。 

测试 管理 工具 的 需求 管理 是 将 测试 用 例 和 测试 需求 相 联 系 , 确 保 了 
整个 测试 流程 的 可 跟踪 性 ,用 户 从 而 能 方便 地 了 解 到 测试 覆 羔 了 应 用 功 
能 需求 的 百分比 有 多 少 个 这 样 的 测试 在 运行 ,有 多 少 个 已 经 通过 测试 
或 失败 了 。 它 可 以 建立 需求 树 型 图 来 更 方便 地 使 QA 经 理 分 配 测试 任 


务 。 测 试管 理工 具 可 以 通过 两 种 方式 来 联系 需求 和 测试 。 一 种 是 直接 将 需求 和 与 缺 隐 有 关 的 
测试 相 联系 , 另 一 种 是 通过 提供 有 关 需 求 变更 过 程 的 所 有 历史 信息 ,为 机 构 保留 了 一 份 核查 线 
索 ,确保 可 以 跟踪 需求 生命 周期 中 发 生 的 任何 变化 。 

测试 管理 工具 的 测试 计划 管理 是 通过 把 测试 计划 树 型 图 以 图 表 的 形式 显示 整个 机 构 的 测 
试 计划 。 它 根据 不 同 的 主题 类 型 将 测试 进行 划分 和 归 类 ,并 说 明 必 须 执行 哪些 测试 以 满足 事 
先 所 定义 的 质量 需求 。 还 允许 测试 人 员 将 测试 计划 树 型 图 中 的 每 个 测试 与 需求 树 型 图 中 的 某 
个 需求 相 联系 。 通 过 定义 测试 需求 覆盖 范围 .测试 人 员 可 以 在 测试 计划 中 跟踪 测试 用 例 之 间 
的 相互 关系 ,并 发 现 它们 原 有 的 测试 需求 。 

在 管理 工具 支持 下 ,测试 可 以 在 网 络 中 任意 一 台 可 用 机 器 上 运行 ,无 论 它 在 本 地 还 是 远 
程 。 另 外 , 它 可 以 和 产品 实现 紧密 地 集成 。 通 过 开放 的 API 完成 配置 后 ,可 以 运行 由 第 三 方 
测试 工具 展开 的 测试 。 测 试 人 员 可 以 安排 自动 测试 在 无 人 监管 的 条 件 下 运行 ,或 是 持续 运行 ， 
或 是 在 测试 实验 室 机 器 空闲 状态 下 运行 。 使 用 这 种 进度 安排 机 制 , 该 工具 就 能 作为 一 种 自动 
化 测试 工具 来 运行 测试 ,并 将 报告 结果 返回 至 中 央 存 储 器 。 

测试 管理 工具 的 缺陷 管理 是 一 个 用 于 登录 跟踪、 管理 和 分 析 应 用 缺陷 的 完整 系统 。 它 多 
许 不 同类 型 的 用 户 , 如 测试 人 员 、 项 目 经 理 ` 开 发 人 员 、 测 试用 户 等 直接 将 缺陷 输入 到 数据 库 
中 ,从 而 协助 展开 测试 流程 。 另 外 ,有 专门 的 缺陷 管理 工具 和 测试 管理 工具 集成 ,这 些 缺 陷 跟 
踪 工 具 可 以 对 产品 在 各 个 开发 周期 内 产生 的 缺陷 和 变更 请 求 进行 有 效 管理 。 尤 其 在 测试 阶 
段 , 项 目 组 的 每 个 成 员 几 乎 都 以 该 系统 为 中 心 来 展开 各 自 的 工作 ,设计 良好 的 管理 系统 可 以 简 
化 和 加 速 变 更 请 求 的 协调 过 程 , 理 顺 项 目 团队 间 的 沟通 ,使 之 协作 自动 化 。 那 么 如 何 选择 缺陷 
跟踪 工具 呢 ? 大 致 有 这 样 几 种 方法 : 

(1) 使 用 文档 和 表格 编辑 软件 ,如 Word、Excel 等 。 

(2) 使 用 企业 内 部 开发 的 管理 软件 。 

(3) 购买 商业 性 的 软件 。 

(4) 下 载 一 套 适合 自己 的 开源 软件 ,自行 配置 和 维护 。 

这 几 种 方法 各 有 优 缺 点 ,如 选择 像 Word、Excel 这 样 的 工具 ,虽然 实施 简单 ,但 效率 很 差 。 
许多 企业 采用 内 部 开发 管理 软件 ,但 需要 成 本 和 时 间 等 方面 的 投入 。 购 买 商业 软件 ,可 能 会 使 
公司 的 财政 紧张 ,对 中 小 型 公司 来 说 尤其 如 此 。 那 么 ,往往 最 后 一 种 方法 无 疑 是 一 种 好 的 
选择 。 

测试 管理 工具 还 可 以 提供 其 他 附加 的 辅助 功能 ,管理 工具 集成 图 表 和 报告 工具 能 协助 分 
析 应 用 在 测试 流程 的 任意 点 上 的 就 绪 情 况 。 测 试 经 理 使 用 有 关 需 求 覆 盖 面 .规划 进展 .运行 进 
度 或 缺陷 统计 、 测 试 结果 进行 定量 的 分 析 等 方面 的 信息 ,可 以 就 应 用 能 否 发 布 做 出 正确 的 
决策 。 

现在 市 面 上 主流 的 测试 管理 工具 有 HP 公司 推出 的 Mercury Quality Center 测试 管理 工 
有 具 套件 。 早 期 的 TestDirector 也 是 HP 公司 的 产品 , 它 是 一 个 集中 实施 ,分 布 式 使 用 的 专业 的 
测试 项 目 管理 平台 软件 ,完全 在 Web 环境 下 运行 。 还 有 Rational 公司 的 Test Manager、 
Compuware 公司 的 TrackRecord 等 测试 管理 工具 软件 等 。 


11.1.2 静态 测试 工具 


所 谓 静 态 测 试 就 是 不 运行 测试 而 直接 对 代码 进行 分 析 的 测试 。 因 此 静态 测试 工具 直接 对 
代码 进行 分 析 ,不 需要 运行 代码 ,也 不 需要 对 代码 编译 链接 ,生成 可 执行 文件 。 静 态 测试 工具 


一 般 是 对 代码 进行 语法 扫描 , 找 出 不 符合 编码 规范 的 地 方 ,根据 某 种 质量 模型 评价 代码 的 质 
量 ,生成 系统 的 调用 关系 图 等 。 

静态 测试 工具 包括 评审 过 程 支持 工具 .静态 分 析 工 具 等 。 

评审 过 程 支持 工具 是 设计 用 来 增强 和 支持 任何 评审 过 程 的 支持 辅助 工具 。 技 术 评 审 和 审 
查 已 经 被 证 明 是 一 种 有 效 的 缺陷 检查 和 消除 形式 。 使 用 这 种 工具 自动 进行 这 一 有 价值 的 过 程 
能 够 防止 缺陷 扩散 到 后 面 的 开发 阶段 。 

评审 过 程 支持 工具 具有 记录 评审 过 程 信息 ,存储 和 交流 评审 的 意见 ,报告 缺陷 和 工作 量 ， 
管理 相关 评审 流程 等 功能 。 

评审 过 程 支持 工具 通过 使 用 IPDL (评审 过 程 定 义 语言 ) 和 灵活 的 文档 类 型 系统 来 实现 。 
评审 过 程 支持 工具 可 以 采用 C/S 或 B/S 体系 结构 。 服 务 器 端 作为 存放 文档 和 其 他 数据 的 中 
心 资源 库 ,可 以 支持 基于 个 人 或 组 为 单位 的 评审 。 在 以 组 为 单位 的 评审 中 还 支持 整个 过 程 的 
同步 和 异步 处 理 。 这 种 工具 的 文档 类 型 系统 可 以 很 容易 地 把 各 种 文档 添加 到 系统 中 。 评 审 过 
程 支持 工具 还 包括 一 些 细 粒 度 的 注释 工具 、 面 向 代码 行 的 浏览 器 ,检查 列表 浏览 器 等 工具 。 另 
外 ,这 种 工具 的 交叉 引用 系统 可 以 很 方便 地 在 多 个 文件 之 间 进 行 切换 。 例 如 , 源 代码 浏览 器 可 
以 自动 地 旦 现 相关 的 检查 列表 项 目 。 检 查 列表 浏览 器 又 允许 快速 地 定位 到 缺陷 列表 和 相关 的 
评论 。 

另外 ,评审 过 程 支持 工具 还 支持 通过 Internet 的 Web 在 线 浏览 的 方式 以 支持 分 布 在 不 同 
地 域 的 小 组 进行 协同 工作 。 

静态 分 析 工 具 是 由 开发 者 在 单元 和 集成 测试 之 前 使 用 的 辅助 工具 。 在 进行 静态 分 析 时 ， 
不 需要 运行 所 测试 的 程序 ,而 是 通过 检查 程序 代码 ,对 程序 的 数据 流 和 控制 流 信息 进行 分 析 ， 
找 出 系统 的 缺陷 ,得 出 测试 报告 。 进 行 静 态 分 析 能 切实 提高 软件 的 质量 ,但 由 于 需要 分 析 人 员 
阅读 程序 代码 ,使 得 这 项 工作 进行 起 来 工作 量 又 很 大 。 对 软件 进行 静态 分 析 的 测试 工具 在 这 
种 需求 下 也 就 产生 了 。 

静态 测试 工具 可 以 发 现下 面 几 种 缺陷 : 

。 引 用 了 一 个 未 定义 值 的 变量 。 
发 现 模块 和 组 件 之 间 的 不 一 致 性 。 
从 未 使 用 的 变量 。 
不 可 到 达 ( 死 ) 的 代码 。 
编程 标准 违例 的 情况 。 
安全 的 脆弱 性 。 
代码 和 软件 模型 的 语法 错误 。 

静态 分 析 工 具 允 许 用 户 调整 软件 质量 标准 化 组 织 制定 的 ISO/IEC9126 质量 模型 中 的 一 
些 数值 ,以 更 加 符合 实际 情况 的 要 求 。 通 过 静态 分 析 工 具 来 量化 地 衡量 一 个 软件 产品 的 质量 。 
在 用 这 类 工具 对 软件 产品 进行 分 析 时 ,以 软件 的 代码 文件 作为 输入 ,静态 分 析 工 具 对 代码 进行 
分 析 , 然 后 与 用 户 定制 的 质量 模型 进行 比较 ,根据 实际 情况 与 模型 之 间 的 差距 得 出 对 软件 产品 
的 质量 评价 。 

具有 检查 代码 规范 性 功能 的 静态 分 析 工 具 , 其 内 部 包含 了 得 到 公认 的 编码 规范 ,比如 函 
数 、 变 量 、 对 象 的 命名 规范 ,函数 语句 数 的 限制 等 ,工具 支持 对 这 些 规范 的 设置 。 工 具 的 使 用 者 
根据 情况 精简 出 适合 自己 的 编码 规范 ,然后 通过 工具 对 代码 进行 分 析 , 定 位 代码 中 违反 编码 规 
范 的 地 方 。 


静态 分 析 工 具 与 人 工 进行 静态 分 析 的 方式 相 比 , 一 方面 能 提高 静态 分 析 工 作 的 效率 , 另 一 
方面 也 能 保证 分 析 的 全 面 性 。 
静态 测试 工具 的 代表 有 Telelogic 公司 的 Logiscope 软件 ; PR 公司 的 PRQA 软件 等 。 


11.1.3 功能 测试 执行 工具 


在 软件 产品 的 各 个 测试 阶段 ,通过 测试 发 现 了 问题 ,开发 人 员 就 要 对 问题 进行 修正 ,修正 
后 的 软件 版 本 需要 再 次 进行 测试 ,以 验证 问题 是 否 得 到 解决 ,是 否 引发 了 新 的 问题 ,这 个 再 次 
进行 测试 的 过 程 称 为 回归 测试 。 

由 于 软件 本 身 的 特殊 性 ,每 次 回归 测试 都 要 对 软件 进行 全 面 的 测试 ,以 防止 由 于 修改 缺陷 
而 引发 新 的 缺陷 。 而 回归 测试 的 工作 量 很 大 ,而 且 很 乏味 ,因为 要 将 上 一 轮 执 行 过 的 测试 原封 
不 动 地 再 执行 一 遍 。 通 过 借助 功能 测试 自动 执行 工具 可 以 达到 这 样 的 目的 。 

使 用 功能 测试 自动 执行 工具 ,一 方面 能 保证 回归 测试 的 完整 性 ,全面 性 ,测试 人 员 也 能 有 
更 多 的 时 间 来 设计 新 的 测试 用 例 , 从 而 提高 测试 质量 ; 另 一 方面 能 缩短 回归 测试 所 需要 的 时 
间 ,缩短 软件 产品 的 面市 时 间 。 

功能 测试 自动 执行 工具 理论 上 可 以 应 用 在 各 个 测试 阶段 ,但 大 多 数 情况 下 是 在 系统 测试 
阶段 中 使 用 。 功 能 测试 自动 执行 工具 的 测试 对 象 一 般 是 那些 拥有 图 形 用 户 界面 的 应 用 程序 。 

一 个 成 熟 的 功能 测试 自动 化 工具 要 包括 以 下 几 个 基本 功能 : 录制 和 回放 、 检 验 、 可 编程 。 

录制 ,就 是 记录 下 对 软件 的 操作 过 程 。 回 放 , 就 是 像 播放 电影 一 样 重 放 录 制 的 操作 。 启 动 
功能 测试 自动 化 工具 ,打开 录制 功能 ,依照 测试 用 例 中 的 描述 一 步 一 步 地 操作 被 测 软件 ,功能 
测试 自动 化 工具 会 以 脚本 语言 的 形式 记录 下 操作 的 全 过 程 。 依 照 此 方法 ,可 以 将 所 有 的 测试 
用 例 进 行 录制 。 在 需要 重新 执行 测试 用 例 时 ,回放 录制 的 脚本 ,功能 测试 自动 化 工具 依照 脚本 
中 的 内 容 操作 被 测 软件 。 除 了 速度 非常 快 之 外 ,通过 功能 测试 自动 化 工具 执行 测试 用 例 与 人 
工 执行 测试 用 例 的 效果 是 完全 一 样 的 。 

录制 只 是 实现 了 测试 输入 的 自动 化 。 一 个 完整 的 测试 用 例 由 输入 和 预期 输出 等 内 容 共同 
组 成 。 所 以 , 光 是 录制 回放 还 不 是 真正 的 功能 测试 自动 化 。 测 试 自动 化 工具 中 有 一 个 检验 功 
能 ,通过 检验 功能 ,在 测试 脚本 中 设置 检验 点 ,使 得 功能 测试 自动 化 工具 能 够 对 操作 结果 的 正 
确 性 进行 检验 ,这 样 就 实现 了 完整 的 测试 用 例 执行 自动 化 。 软 件 界面 上 的 一 切 界 面 元 素 都 可 
以 作为 检验 点 来 对 其 进行 检验 。 

脚本 录制 好 了 ,也 加 入 了 检验 点 ,一 个 完整 的 测试 用 例 已 经 被 自动 化 了 。 但 我 们 还 想 对 脚 
本 的 执行 过 程 进行 更 多 的 控制 ,比如 依据 执行 情况 进行 判断 ,从 而 执行 不 同 的 路 径 , 或 者 是 对 
某 一 段 脚本 重复 执行 多 次 。 通 过 对 录制 的 脚本 进行 编程 ,可 以 实现 上 述 的 要 求 。 现 在 的 主流 
功能 测试 自动 化 工具 都 支持 对 脚本 的 编程 。 像 传统 的 程序 语言 一 样 ,在 功能 测试 自动 化 工具 
录制 的 脚本 中 ,可 加 入 分 支 循 环 、 函 数 调用 这 样 的 控制 语句 。 通 过 对 脚本 进行 编程 ,能 够 使 脚 
本 更 加 灵活 ,功能 更 加 强大 ,脚本 的 组 织 更 富有 逻辑 性 。 在 传统 的 编程 语言 中 适用 的 那些 编程 
思想 ,在 组 织 测试 自动 化 脚本 时 同样 适用 。 
在 测试 过 程 中 ,使 用 功能 测试 自动 化 工具 的 大 体 过 程 如 下 : 
(1) 准备 录制 。 这 时 要 保证 所 有 要 自动 化 的 测试 用 例 已 经 设计 完毕 ,并 形成 文档 。 
(2) 进行 录制 。 打 开 功 能 测试 自动 化 工具 ,启动 录制 功能 , 按 测 试用 例 中 的 输入 描述 , 操 
作 被 测试 应 用 程序 。 

(3) 编辑 测试 脚本 。 通 过 加 入 检测 点 .参数 化 测试 ,以 及 添加 分 支 . 循 环 等 控制 语句 来 增 


强 测试 脚本 的 功能 ,使 将 来 的 回归 测试 真正 能 够 自动 化 。 

(4) 调试 脚本 。 保 证 脚本 的 正确 性 。 

(5) 在 回归 测试 中 运行 测试 。 在 回归 测试 中 ,通过 功能 测试 自动 化 工具 运行 脚本 ,检验 软 
件 正确 性 ,实现 测试 的 自动 化 进行 。 

(6) 分 析 结 果 , 报 告 问题 。 查 看 测试 自动 化 工具 记录 的 运行 结果 ,记录 问题 ,报告 测试 


结果 。 
功能 测试 自动 化 工具 是 软件 测试 工具 中 非常 活跃 的 一 类 工具 ,现在 已 经 发 展 的 较为 成 熟 ， 
如 HP 公司 的 Quick Test Professional,IBM 公司 的 Rational Functional tester, Compuware 
公司 的 QACenter 等 都 是 被 广泛 使 用 的 功能 测试 自动 化 工具 。 


11.1.4 覆盖 工具 (结构 性 测试 工具 ) 


在 开发 过 程 中 ,对 一 个 应 用 程序 通过 手工 测试 ,总 会 有 一 部 分 代码 功能 没有 被 检测 到 ,或 
者 说 逐个 检测 每 一 个 函数 或 方法 的 调用 是 相当 费时 间 的 。 未 被 检测 的 代码 我 们 不 能 保证 它 的 
可 靠 性 ,以 后 程序 的 失败 可 能 往往 就 是 由 这 部 分 未 检测 的 代码 造成 的 。 现 在 可 以 用 覆盖 工具 
来 帮助 我 们 解决 这 些 问题 ,在 测试 程序 时 ,每 完成 一 次 应 用 路 径 ,覆盖 工具 就 能 够 列 出 在 这 次 
对 话 中 所 有 函数 或 方法 被 调用 次 数 、 所 占 比率 等 ,并 可 以 直接 定位 到 源 代码 ,也 可 以 合并 多 个 
应 用 路 径 来 进行 检测 。 所 以 说 覆盖 工具 能 通过 衡量 和 跟踪 代码 执行 及 代码 稳定 性 ,帮助 开发 
团队 节省 时 间 和 改善 代码 可 靠 性 。 

覆盖 工具 可 以 针对 程序 的 逻辑 结构 设计 测试 用 例 , 用 逮 辑 覆盖 率 来 衡量 测试 的 完整 性 。 
逻辑 单位 主要 有 语句 、 分 支 . 判 定 ( 判 断 ) 、 条 件 、 条 件 组 合 、 路 径 等 。 在 实际 的 白 盒 测 试 过 程 中 
可 能 同时 存在 对 代码 进行 功能 测试 。 语 句 覆盖 、 分 支 覆 盖 、 判 定 覆 盖 ` 条 件 覆 盖 ,条件 组 合 覆 
盖 ,路径 覆 盖 是 白 盒 测 试 的 几 种 方法 ,利用 这 些 方法 进行 白 盒 测试 往往 需要 覆盖 工具 来 提供 支 
撑 , 如 果 单 赁 人 来 完成 这 项 任务 有 时 很 困难 或 是 不 可 能 的 ,用 手工 实现 这 种 测试 完整 性 ,其 测 
试 成 本 是 不 可 想象 的 , 面 对 如 此 严格 的 测试 要 求 , 就 必须 借助 一 些 工 具 , 可 以 在 较 低 的 成 本 下 
达到 这 种 测试 要 求 。 

覆盖 工具 利用 程序 的 逻辑 结构 图 进行 覆盖 运行 ,运行 完成 后 可 以 立即 统计 白 盒 测试 覆盖 
率 。 有 些 工 具 可 以 按照 不 同 的 颜色 或 符号 显示 语句 的 覆盖 或 条 件 等 情况 ,给 软件 测试 者 提供 
动态 的 指示 。 针 对 未 覆盖 的 逻辑 再 设计 测试 用 例 覆 盖 它 ,例如 , 先 检 查 是 否 有 语句 未 覆盖 ,有 
的 话 设计 测试 用 例 覆 盖 它 ,然后 用 同样 方法 完成 条 件 覆 盖 、 分 支 覆盖 和 路 径 覆 盖 , 而 这 一 过 程 
用 覆盖 工具 可 以 用 较 少 的 时 间 成 本 达到 非常 高 的 测试 完整 性 。 

商业 性 的 覆盖 测试 工具 .比较 有 代表 性 的 如 Compuware 公司 的 Numega 系列 工具 和 
ParaSoft 的 JavaSolution ,以 及 C/C++Solution 系列 等 。 

非 商业 性 的 覆盖 测试 工具 ,主要 是 以 Xunit 系列 为 代表 的 测试 框架 工具 ,如 Aunit、 
Cppunit\Dunit Httpunit Jtest\Perlunit 和 Xmlunit 等 。 


11.1.5 性 能 和 压力 测试 工具 


性 能 测试 工具 实际 上 是 一 种 模拟 软件 运行 环境 的 工具 , 它 能 帮助 我 们 在 实验 室 里 搭建 出 
需要 的 测试 环境 ,通过 性 能 测试 工具 来 检验 是 否 达到 客户 所 要 求 的 性 能 指标 ,通过 性 能 测试 工 
有 具 能 分 析 各 种 问题 和 性 能 瓶颈 ,为 进一步 改善 系统 性 能 提供 帮助 。 现 在 ,基于 Web 是 软件 系 
统 发 展 的 一 个 趋势 ,性 能 测试 也 就 变 的 比 以 往 更 加 重要 了 ,性 能 测试 工具 也 自然 会 在 软件 测试 


过 程 中 被 更 多 地 使 用 。 

新 一 代 的 性 能 测试 工具 可 以 使 测试 无 人 值守 地 运行 ,借助 这 些 工具 可 以 使 测试 执行 时 间 
预先 设置 ,而 后 脚本 自动 开始 ,无 须 任何 人 工 干预 。 许 多 自动 性 能 测试 工具 可 允许 虚拟 用 户 测 
试 ,在 虚拟 用 户 测试 时 ,测试 工程 师 可 仿真 几 十 个 、 几 百 个 或 几 千 个 执行 各 种 测试 脚本 的 用 户 。 

压力 测试 是 一 个 让 客户 端 运 行 在 高 压力 场景 下 观察 它 是 否 会 崩溃 的 过 程 。 压 力 条 件 的 例 
子 包 括 让 客户 端 应 用 连续 运行 多 个 小 时 ,让 某 个 测试 程序 重复 运行 很 多 次 或 运行 很 多 不 同 的 
测试 程序 。 压 力 测试 对 于 确保 应 用 程序 能 够 控制 生产 条 件 是 很 重要 的 ,因为 在 生产 时 ,对 机 器 
资源 的 无 效 管理 能 够 导致 系统 崩溃 。 

通过 压力 测试 工具 具有 的 资源 监控 特性 ,使 得 压力 测试 变 得 容易 。 可 以 很 快 发 现 应 用 程 
序 在 资源 管理 方面 存在 的 问题 。 压 力 测试 工具 的 使 用 是 使 客户 端 在 大 容量 情况 下 运行 的 过 
程 ,以 查看 应 用 将 在 何 时 何 处 中 断 。 判 断 系 统 经 受 最 大 和 最 小 的 负载 时 系统 是 否 中 断 并 且 在 
何 处 中 断 , 并 确定 哪 一 个 部 分 首先 中 断 。 

压力 测试 工具 可 以 识别 系统 的 薄弱 环节 。 在 系统 需求 定义 的 阀 值 并 描述 系统 对 过 载 的 反 
应 。 压 力 测试 工具 有 助 于 在 系统 最 大 负载 时 检验 系统 是 否 正常 工作 。 它 也 揭示 了 当前 系统 经 
受过 载 时 是 否 能 按 规定 的 要 求 那样 工作 。 

许多 自动 压力 测试 工具 还 可 以 包括 负载 仿真 器 ,该 仿真 器 可 使 测试 工程 师 同 时 模拟 几 百 
个 或 几 千 个 使 用 目标 程序 的 虚拟 用 户 。 不 需要 人 到 场 启 动 测试 或 监视 测试 ,可 设 定 计 时 以 规 
定 何 时 应 该 启动 测试 脚本 ,测试 的 执行 可 以 无 人 看 管 。 另 外 ,测试 工具 还 可 以 产生 一 个 测试 日 
志 输 出 ,该 输出 列 出 压力 测试 数据 。 工 具 可 记录 任何 意外 的 活动 窗口 (如 错误 对 话 框 ) 。 

压力 测试 工具 可 以 暴露 的 缺陷 有 内 存 泄漏 ,性 能 问题 .锁定 问题 ,并 发 问题 \、 系 统 资源 过 量 
消耗 问题 以 及 磁盘 空间 耗 尽 的 情况 。 

专用 于 性 能 测试 的 工具 包括 Radview 公司 的 WebLoad、Microsoft 公司 的 Web 
Application Stress; Compuware 公司 的 QAload IJBM 公司 的 Rational Performance Tester 以 
及 HP 的 LoadRunner 等 。 这 些 工 具 的 测试 对 象 是 整个 企业 的 系统 , 它 通 过 模拟 实际 用 户 的 
操作 行为 和 实行 实时 性 能 监测 来 帮助 用 户 更 快 地 查找 和 发 现 问题 。 


11.1.6 其 他 工具 


除 以 上 介绍 的 软件 测试 工具 外 ,还 有 诸如 测试 设计 工具 、 调 试 工具 ` 嵌 入 式 测试 工具 等 ,这 
些 工 具 在 不 同 的 系统 中 根据 具体 情况 也 会 使 用 。 

测试 设计 工具 是 一 种 帮助 我 们 设计 测试 用 例 的 软件 工具 。 虽 然 设计 测试 用 例 是 一 项 智力 
性 的 活动 ,但 仔细 思考 一 下 就 会 发 现 , 很 多 设计 测试 用 例 的 原则 、 方 法 是 固定 的 ,如 等 价 类 划 
分 、 边 界 值 分 析 、 因 果 图 等 ,这 些 方 法 很 适合 通过 软件 工具 来 实现 。 

测试 用 例 设计 工具 按照 生成 测试 用 例 时 数据 输入 内 容 的 不 同 ,可 以 分 为 基于 程序 代码 的 
测试 用 例 设计 工具 和 基于 需求 说 明 的 测试 用 例 设 计 工具 。 下 面 分 别 对 这 两 类 工具 进行 介绍 。 

基于 程序 代码 的 测试 用 例 设计 工具 是 一 种 白 盒 工具 , 它 读 入 程序 代码 文件 ,通过 分 析 代 码 
的 内 部 结构 ,产生 测试 的 输入 数据 。 这 种 工具 一 般 应 用 在 单元 测试 中 ,针对 的 是 函数 、 类 这 样 
的 测试 对 象 。 由 于 这 种 工具 与 代码 的 联系 很 紧密 ,因此 一 种 工具 只 能 针对 某 一 种 ( 些 ) 编 程 
语言 。 

这 类 工具 的 局 限 性 是 只 能 产生 测试 的 输入 数据 ,而 不 能 产生 输入 数据 后 的 预期 结果 ,这 个 
局 限 也 是 由 这 类 工具 生成 测试 用 例 的 机 理 所 决 定 的 。 所 以 ,基于 程序 代码 的 测试 用 例 设计 工 


具 所 生成 的 测试 用 例 还 不 能 称 为 真正 意义 上 的 测试 用 例 。 不 过 即使 这 样 ,这 种 工具 仍然 为 我 
们 设计 单元 测试 的 测试 用 例 提供 了 很 大 便利 。 

基于 需求 说 明 的 测试 用 例 设计 工具 ,依据 软件 的 需求 说 明 , 生 成 基于 功能 需求 的 测试 上 
例 。 这 种 工具 所 生成 的 测试 用 例 既 包 括 了 测试 输入 数据 ,也 包括 预期 结果 ,是 真正 完整 的 测试 
用 例 。 使 用 这 种 测试 用 例 设 计 工 具 生 成 测试 用 例 时 ,需要 人 工事 先 将 软件 的 功能 需求 转化 为 
工具 可 以 理解 的 文件 格式 ,再 以 这 个 文件 作为 输入 ,通过 工具 生成 测试 用 例 。 在 使 用 这 种 测试 
用 例 设 计 工 具 来 生成 测试 用 例 时 ,需求 说 明 的 质量 是 很 重要 的 。 由 于 这 种 测试 用 例 设 计 工 具 
是 基于 功能 需求 的 ,因此 可 用 来 设计 任何 语言 、 任 何平 台 的 任何 应 用 系统 的 测试 用 例 。 

所 有 测试 用 例 设计 工具 都 依赖 于 生成 测试 用 例 的 算法 ,工具 比 使 用 相同 算法 的 测试 人 员 
设计 的 测试 用 例 更 彻底 、 更 精确 ,这 方面 工具 具有 优势 。 但 人 工 设计 测试 用 例 时 ,可 以 考虑 附 
加 测试 ,可 以 对 遗漏 的 需求 进行 补充 ,这 些 是 工具 无 法 做 到 的 。 所 以 ,测试 用 例 设计 工具 并 不 
能 完全 代替 测试 工程 师 来 设计 测试 用 例 。 使 用 这 些 工 具 的 同时 ,再 人 工地 检查 、 补 充 一 部 分 测 
试用 例会 取得 比较 好 的 效果 。 

肉 入 式 软件 测试 工具 集 是 测试 诅 入 式 软件 专用 的 一 套 测试 工具 集 , 它 贯 穿 于 软件 开发 、 代 
码 评审 、 单 元 /集成 测试 、 系 统 测试 以 及 软件 维护 阶段 。 它 面向 源 代码 进行 工作 。 骨 入 式 软件 
测试 工具 针对 编码 .测试 和 维护 。 因 此 ,嵌入 式 软件 测试 工具 可 以 帮助 代码 评审 和 动态 覆盖 
测试 。 

一 些 嵌 入 式 软件 测试 工具 对 软件 的 分 析 , 采 用 基于 国际 间 使 用 的 度量 方法 (Halstead、 
McCabe 等 ) 的 质量 模型 ,以 及 从 多 家 公司 收集 的 编程 规则 集 ,可 以 从 软件 的 编程 规则 .静态 特 
征 和 动态 测试 覆盖 等 多 个 方面 量化 地 定义 质量 模型 ,并 检查 ,评估 软件 质量 。 

通过 舱 入 式 软件 测试 工具 的 应 用 可 以 达到 以 下 好 处 ， 

(1) 在 开发 阶段 ,查找 可 寻找 的 潜在 错误 。 

(2) 在 代码 评审 阶段 ,可 以 定位 那些 具有 80% 错 误 的 程序 模块 。 

(3) 通过 对 未 被 测试 代码 的 定位 ,可 以 帮助 找到 隐藏 在 未 测试 代码 中 的 缺陷 。 

(4) 项 目 领导 和 质量 工程 师 用 它 定 期 地 检查 整个 软件 的 质量 。 

(5) 在 各 个 阶段 用 嵌入 式 软件 测试 工具 来 改进 软件 工程 的 实践 ,训练 程序 员 编 写 良 好 的 
代码 和 测试 活动 ,确保 系统 易于 维护 ,减少 风险 。 

(6) 在 有 合同 关系 时 ,合同 方 可 以 用 它 明 确定 义 验收 时 的 质量 等 级 和 执行 测试 。 承 制 方 
可 以 用 它 演示 其 软件 的 质量 。 

此 外 ,还 有 针对 数据 库 测试 的 TestBytes, 对 应 用 性 能 进行 优化 的 EcoScope 等 工具 。 


11.1.7 测试 工具 的 选择 


面 对 琳 琅 满目 的 自动 化 测试 工具 ,对 工具 的 选择 就 成 了 一 个 比较 重要 的 问题 。 在 考虑 工 
具 选 用 的 时 候 , 建 议 从 以 下 几 个 方面 来 权衡 和 选择 。 

(1) 工具 的 功能 。 功 能 当然 是 我 们 最 关注 的 内 容 , 选 择 一 个 自动 化 测试 工具 首先 要 看 它 
能 提供 的 功能 。 当 然 ,这 并 不 是 说 它 提供 的 功能 越 多 就 越 好 ,在 实际 的 选择 过 程 中 ,实用 才 是 
根本 ,也 就 是 说 要 结合 被 测 软 件 项 目的 特点 来 看 待 这 个 问题 。 事 实 上 ,目前 市 面 上 同类 型 的 软 
件 测试 工具 的 基本 功能 都 大 同 小 异 , 各 种 测试 工具 软件 提供 的 功能 也 大 致 相同 ,只 不 过 有 不 同 
的 侧重 点 。 例 如 , 白 盒 测试 工具 Logiscope 和 PRQA 软件 ,它们 提供 的 基本 功能 大 致 相同 ,只 
是 在 编码 规则 、 编 码 规则 的 定制 .采用 的 代码 质量 标准 方面 有 所 不 同 。 


除了 基本 的 功能 之 外 ,下 面 的 需求 也 可 以 作为 选择 自动 化 测试 工具 的 参考 : 
。 各 种 分 析 报 表 功 能 。 自 动 化 测试 工具 生成 的 结果 最 终 要 由 人 进行 解释 ,而 且 查 看 最 终 
报告 的 人 员 不 一 定 对 测试 很 熟悉 ,因此 ,自动 化 测试 工具 能 否 生成 分 析 结 果 报 表 , 能 够 
以 什么 形式 提供 报表 是 需要 考虑 的 因素 。 
自动 化 测试 工具 的 集成 能 力 。 自 动 化 测试 工具 的 引入 是 一 个 长 期 的 过 程 ,应 该 是 伴随 
着 测试 过 程 的 改进 而 进行 的 一 个 持续 的 过 程 。 因 此 ,自动 化 测试 工具 的 集成 能 力也 是 
必须 考虑 的 因素 ,这 里 的 集成 包括 两 个 方面 的 意思 : 首先 ,自动 化 测试 工具 能 否 和 开 
发 工具 进行 良好 的 集成 ; 其 次 ,自动 化 测试 工具 能 否 和 其 他 自动 化 测试 工具 进行 良好 
的 集成 。 
操作 系统 和 开发 工具 的 兼容 性 。 自 动 化 测试 工具 可 否 跨 平台 ,是 否 适 用 于 企业 目前 使 
用 的 开发 工具 ,这 些 问 题 也 是 在 选择 一 个 自动 化 测试 工具 时 必须 考虑 的 问题 。 

(2) 价格 因素 。 除 了 功能 之 外 ,价格 就 应 该 是 最 重要 的 因素 了 。 当 然 , 要 视 企 业 的 财政 状 
况 而 行 。 

(3) 对 自动 化 测试 工具 进行 综合 评估 。 主 要 从 以 下 几 点 来 考虑 : 

。 由 于 单一 的 工具 不 能 普遍 满足 企业 对 自动 化 测试 工具 的 所 有 需求 ,因此 在 确定 了 本 企 
业 对 工具 的 需求 后 ,要 考虑 今后 项 目 组 可 能 要 采用 的 新 技术 ,确定 出 企业 对 工具 的 
期 望 。 
定义 出 评估 的 范围 ,选择 合适 的 测试 用 例 ,评估 工具 是 否 能 达到 测试 所 要 求 的 目标 , 自 
动 化 测试 工具 的 实际 性 能 是 否 和 自动 化 测试 工具 文档 中 声明 的 一 致 。 

。 总 结 试用 自动 化 测试 工具 的 结果 ,得 出 评估 报告 。 

(4) 引入 自动 化 测试 工具 的 目的 是 使 测试 自动 化 ,引入 工具 需要 考虑 引入 工具 的 连续 性 
和 一 致 性 ,而 选择 自动 化 测试 工具 是 测试 自动 化 的 一 个 重要 步骤 之 一 ,因此 在 选择 和 引入 自动 
化 测试 工具 时 ,必须 考虑 自动 化 测试 工具 引入 的 连续 性 。 也 就 是 说 ,对 自动 化 测试 工具 的 选择 
必须 有 一 个 全 盘 的 考虑 ,分 阶段 .逐步 地 引入 自动 化 测试 工具 。 

另外 ,目前 许多 开源 的 测试 工具 也 值得 考虑 ,这 些 开源 工具 可 以 通过 开放 的 接口 实现 工具 
间 的 集成 。 


11.2 测试 自动 化 与 手工 测试 


11.1 节 阐述 了 软件 自动 化 测试 是 执行 用 某 种 程序 设计 语言 编制 的 自动 测试 程序 ,控制 被 
测 软件 的 执行 ,模拟 手工 测试 步骤 ,完成 全 自动 或 半自动 测试 。 自 动 测试 ,实际 上 是 将 大 量 的 
重复 性 工作 交 给 计算 机 去 完成 。 一 个 优秀 的 自动 测试 工具 ,不 但 可 以 满足 科学 测试 的 基本 
要 求 ,而 且 可 以 节约 大 量 的 时 间 、 成 本 .人员 和 资源 。 自 动 测试 往往 要 借助 自动 测试 工具 才 
能 实现 。 在 实际 的 测试 中 可 以 采用 手工 测试 或 自动 测试 方法 ,或 者 两 种 方法 相 结合 的 方法 
进行 。 


11.2.1 手动 测试 的 不 足 


在 传统 的 手工 测试 方法 中 ,测试 人 员 根据 测试 大 纲 中 所 描述 的 测试 步骤 和 方法 ,手工 地 输 
和 测试 数据 ,记录 测试 结果 。 手 工 测试 的 特点 是 能 详细 地 测试 软件 的 各 个 功能 ,测试 速度 由 人 
来 控制 ,能够 完整 而 从 容 地 观察 软件 的 运行 情况 并 立即 报告 测试 结果 。 


Co 


虽然 手工 测试 在 一 定时 期 占 主要 的 手段 ,但 是 手工 测试 有 它 的 局 限 性 ,手工 测试 无 法 保证 
测试 的 科学 性 与 严密 性 ,原因 如 下 : 

。 测试 人 员 要 负责 大 量 文档 ,报表 的 制定 和 整理 工作 ,会 变 得 力不从心 。 
受 软件 开发 周期 \ 开 发 成 本 及 人 员 ,资源 等 诸多 方面 因素 的 限制 ,难以 进行 全 面 的 测试 。 
如 果 修 正 缺 陷 所 花费 的 时 间 相当 长 ,回归 测试 将 变 得 异常 困难 。 
对 测试 过 程 中 发 现 的 大 量 缺 陷 缺 乏 科学 \ 有 效 的 管理 手段 ,责任 变 得 含糊 不 清 ,没有 人 
能 向 决策 层 提供 精确 的 数据 以 度量 当前 的 工作 进度 及 工作 效率 。 
反复 测试 带 来 的 倦 傅 情绪 及 其 他 人 为 因素 使 得 测试 标准 前 后 不 一 致 ,测试 花费 的 时 间 
越 长 ,测试 的 严格 性 也 就 越 低 。 
。 组 织 一 次 多 用 户 的 测试 很 不 方便 ,需要 花费 巨大 的 人 力 和 物力 ,并 且 其 效果 并 不 明显 。 
。 难以 对 不 可 视 对 象 或 对 象 的 不 可 视 属性 进行 测试 。 
因此 ,通过 自动 化 测试 工具 来 实现 测试 自动 化 是 解决 这 种 状况 的 一 种 途径 。 


11.2.2 自动 测试 的 优点 


自动 测试 与 手工 测试 相 比 具有 如 下 优点 : 

(1) 能 执行 一 些 手工 测试 不 可 能 或 很 难 完成 的 测试 。 例 如 ,对 于 多 用 户 联机 系统 的 并 发 
操作 的 测试 ,用 手工 进行 几乎 是 不 可 能 的 ,但 自动 测试 工具 可 以 模拟 来 自 多 个 用 户 的 输入 。 而 
客户 端的 测试 过 程 通过 自 定义 得 到 用 户 脚 本 ,自动 回放 测试 ,使 不 了 解 整个 商业 应 用 复杂 内 容 
的 技术 人 员 也 可 以 胜任 。 例 如 ,对 于 200 个 用 户 的 联机 系统 ,用 户 手工 进行 并 发 操作 几乎 是 不 
可 能 的 ,但 自动 测试 可 以 模拟 来 自 200 个 用 户 的 输入 。 

(2) 测试 的 效率 。 在 需要 多 次 执行 的 情况 下 ,自动 测试 不 需要 测试 人 员 每 次 都 重复 相同 
的 过 程 。 自 动 测试 建立 起 来 后 ,就 可 以 多 次 重复 执行 ,大 大 提高 了 测试 的 效率 。 将 测试 人 员 从 
繁重 的 测试 执行 中 解脱 出 来 ,他们 可 以 投入 更 多 的 精力 来 设计 更 多 更 好 的 测试 用 例 。 

(3) 高 测试 的 准确 性 ,降低 对 测试 人 员 的 技术 要 求 。 手 工 测试 需要 测试 人 员 理 解 测试 步 
又 和 被 测 软件 ,并 按照 测试 步骤 一 步 一 步 地 执行 。 在 执行 过 程 中 ,测试 人 员 难 免 会 犯 这 样 或 那 
样 的 错误 ,这些 都 会 影响 测试 的 准确 性 。 而 自动 测试 建立 起 来 之 后 ,测试 人 员 只 需要 执行 自动 
测试 用 例 并 在 必要 时 对 输出 结果 进行 一 定 的 检查 即 可 。 大 大 提高 了 测试 的 准确 性 ,同时 也 降 
低 了 对 测试 人 员 的 技术 要 求 。 

(4) 可 实现 无 人 照料 测试 。 自 动 测试 还 可 以 实现 无 人 照料 测试 ,充分 利用 休息 时 间 进 行 
测试 。 这 样 可 以 更 加 合理 地 利用 测试 资源 ,进行 更 多 的 测试 。 

(5) 具有 一 致 性 和 可 重复 性 。 可 以 利用 自动 测试 重复 多 次 相同 的 测试 ,这 样 就 可 以 保证 
测试 的 一 致 性 ,而 这 在 手工 测试 中 是 很 难得 到 保证 的 。 由 于 自动 化 测试 的 一 致 性 ,很 容易 发 现 
被 测 软件 的 任何 改变 。 

(6) 有 利于 进行 回归 测试 。 回 归 测 试 往往 需要 重复 以 前 进行 过 的 测试 ,自动 测试 具有 良 
好 的 可 重复 性 ,使 得 回归 测试 比较 容易 进行 。 

(7) 缩短 测试 的 时 间 。 一 旦 实现 了 测试 自动 化 ,就 可 以 比 手工 测试 更 快 地 执行 测试 ,缩短 
测试 的 时 间 ,可 以 更 快 地 将 软件 推 向 市 场 。 


11.2.3 自动 测试 的 局 限 性 
自动 软件 测试 工具 并 不 能 完全 替代 人 的 工作 ,自动 软件 测试 工具 的 应 用 并 不 能 发 现 所 有 


类 型 的 错误 ,还 有 大 量 的 工作 需要 程序 员 去 完成 。 软 件 自动 测试 并 不 是 万 能 的 ,并 不 能 解决 所 
有 的 问题 ,这 些 问 题 包括 : 

(1) 自动 化 测试 可 能 降低 实际 的 测试 效率 ,这 种 情况 发 生 在 仅 进 行 很 少 的 软件 测试 时 。 

(2) 期 望 自 动 测 试 发 现 大 量 错误 。 测试 在 首次 进行 时 可 能 发 现 大 量 的 错误 ,如 果 测 试 已 
经 进行 过 , 则 再 次 运行 发 现 错误 的 概率 要 小 得 多 。 除 非 测 试 一 段 已 经 修改 过 的 代码 或 者 软件 
的 其 他 部 分 的 修改 影响 了 这 段 代码 ,或 者 在 不 同 的 环境 中 运行 这 段 代码 。 

(3) 缺乏 测试 实际 经 验 。 如 果 存 在 测试 组 织 差 ,文档 较 少 或 不 一 致 , 则 自动 测试 发 现 错误 
的 能 力 较 差 。 

(4) 技术 问题 。 商 用 测试 工具 是 软件 产品 ,作为 第 三 方 的 软件 产品 ,不 具备 解决 问题 的 能 
力 和 技术 支持 。 同 样 的 原因 ,测试 工具 和 其 他 软件 的 互 操作 性 也 是 一 个 严重 的 问题 ,技术 环境 
变化 如 此 之 快 ,使 测试 工具 很 难 跟 得 上 。 

因此 ,对 软件 自动 化 测试 应 该 有 正确 的 认识 , 它 并 不 能 完全 代替 手工 测试 。 不 要 期 望 有 了 
自动 化 测试 就 能 提高 测试 的 质量 。 此 外 ,自动 测试 也 需要 测试 人 员 具 备 相应 的 技术 ,如 脚本 开 
发 等 。 如 果 缺 少 了 这 些 必 备 的 技能 ,自动 测试 很 难保 证 可 靠 和 高 效 。 


练习 


. 简 述 自动 化 测试 工具 的 类 型 。 

. 查阅 资料 完成 一 个 不 同 功能 的 测试 工具 之 间 的 集成 。 
. 比较 手工 测试 和 自动 化 测试 之 间 的 优点 和 缺点 。 

. 下 载 一 个 开源 的 静态 测试 工具 并 使 用 。 

. 在 Java Eclipse 开发 环境 中 集成 Junit 并 使 用 。 


an mo 


开源 测试 工具 应 用 


12.1 单元 开源 测试 工具 JUnit 


12.1.1 JUnit 简介 


JUnit 是 由 Erich Gamma 及 Kent Beck 两 人 开发 的 ,用 于 Java 语言 
编写 的 面向 对 象 程序 的 单元 测试 工具 ,并 由 SourceForge 发 行 。JUnit 
是 一 个 免费 软件 (Open Source Software) 。JUnit 的 授权 方式 为 IBM's 
Common Public License 1.0 版 。 

1. JUnit 框架 介绍 

1) TestCase( 测 试用 例 ) 

对 每 个 测试 类 ,都 要 定义 一 个 测试 用 例 。 

JUnit 支持 两 种 运行 单个 测试 的 方法 : 静态 的 和 动态 的 方法 。 

(1) 静态 的 方法 就 是 覆盖 TestCase 类 的 runTest() 方 法 ,一 般 是 采 
用 内 部 类 的 方式 创建 一 个 测试 实例 : 

TestCase test01 = new testCar("test getWheels") { 

public void runTest() { 

testGetWheels( ); 

) 

采用 静态 的 方法 要 注意 给 每 个 测试 一 个 名 字 ,这样 就 可 以 区 分 哪个 
测试 失败 了 。 

(2) 动态 的 方法 是 用 内 省 来 实现 runTest() 以 创建 一 个 测试 实例 。 
这 要 求 测试 的 名 字 就 是 需要 调用 的 测试 方法 的 名 字 : 


TestCase test01 = new testCar("testGetWheels"); 


JUnit 会 动态 查找 并 调用 指定 的 测试 方法 。 动 态 的 方法 很 简洁 ,但 如 
果 输 入 了 错误 的 名 字 就 会 得 到 一 个 令 人 奇怪 的 NoSuchMethodException 
异常 。 动 态 的 方法 和 静态 的 方法 都 很 好 ,可 以 按照 自己 的 喜好 来 选择 。 

2) TestSuite 

一 旦 创建 了 一 些 测试 实例 ,下 一 步 就 是 让 它们 能 一 起 运行 。 必 须 定 
义 一 个 TestSuite。 在 JUnit 中 ,这 就 要 求 在 TestCase 类 中 定义 一 个 静 


态 的 suite() 方 法 。suite() 方 法 就 像 main() 方 法 一 样 ,JUnit 用 它 来 执行 测试 。 在 suite() 方 法 
中 ,将 测试 实例 加 到 一 个 TestSuite 对 象 中 .并 返回 这 个 TestSuite 对 象 。 一 个 TestSuite 对 象 
可 以 运行 一 组 测试 。TestSuite 和 TestCase 都 实现 了 Test 接口 ,而 Test 接口 定义 了 运行 测 
试 所 需 的 方法 。 这 就 允许 用 TestCase 和 TestSuite 的 组 合 创建 一 个 TestSuite。 

public static Test suite() { 

TestSuite suite = new TestSuite(); 

suite. addTest(new testCar("testGetWheels" ) ) ; 

suite. addTest(new testCar("testGetSeats" ) ) ; 


return suite; 


i static Test suite() { 

return new TestSuitel( testCar. class); 

} 

3) TestRunner 

有 了 TestSuite 就 可 以 运行 这 些 测试 了 ,JUnit 提供 了 三 种 界面 来 运行 测试 : 

[Text UI] junit. textui. TestRunner 

[AWT UI] junit. awtui. TestRunner 

[Swing UI] junit. swingui. TestRunner 

如 果 需 要 在 一 个 或 若干 个 类 执行 多 个 测试 ,这 些 类 就 成 为 了 测试 的 context。 在 JUnit 中 
被 称 为 Fixture。 当 编写 测试 代码 时 ,会 发 现 你 花费 了 很 多 时 间 配 置 /初始 化 相关 测试 的 
Fixture。 将 配置 Fixture 的 代码 放 入 测试 类 的 构造 方法 中 并 不 可 取 , 因 为 我 们 要 求 执行 多 个 
测试 ,并 不 希望 某 个 测试 的 结果 意外 地 (如 果 这 是 你 要 求 的 , 那 就 男 当 别论 了 ) 影 响 其 他 测试 的 
结果 。 通 常 若干 个 测试 会 使 用 相同 的 Fixture, 而 每 个 测试 又 各 有 自己 需要 改变 的 地 方 。 为 
此 ,JUnit 提供 了 两 个 方法 ,定义 在 TestCase 类 中 。 

protected void setUp() throws java. lang. Exception 

protected void tearDown() throws java. lang. Exception 

覆盖 setUp() 方 法 ,初始 化 所 有 测试 的 Fixture, 如 建立 数据 库 连接 ,将 每 个 测试 略 有 不 同 
的 地 方 在 testXXX() 方 法 中 进行 配置 。 覆 盖 tearDown() ,释放 在 setUp() 中 分 配 的 永久 性 资 
源 , 如 数据 库 连 接 。 当 JUnit 执行 测试 时 , 它 在 执行 每 个 testXXXXX() 方 法 前 都 调用 setUp() ,而 
在 执行 每 个 testXXXXX() 方 法 后 都 调用 tearDown() 方 法 ,由 此 保证 了 测试 不 会 相互 影响 。 

4) Assert 

Assert 类 中 定义 了 相当 多 的 assert 方法 ,主要 有 assert()、assertEquals()、assertNull()、 
assertSame() ,assertTrue() 和 fail() 等 方法 。 

Failure( 失 败 ) 是 一 个 期 望 被 assert 方法 检查 到 的 结果 。 

Error( 错 误 ) 则 是 意外 的 问题 引起 的 ,如 ArrayIndexOutOfBoundsException。 

2. JUnit 的 优势 

不 论 所 参与 的 项 目 是 否 遵循 XP 或 TDD, 单 元 测试 都 是 免不了 的 。 在 XP 所 定义 的 规则 
里 ,单元 测试 占有 很 大 比重 。 而 由 于 Java 面向 对 象 语言 特性 ,以 及 JUnit 平台 良好 的 设计 架 
构 , 我 们 至 少 可 以 获得 下 面 的 益处 : 

(1) 不 用 为 了 单元 测试 编写 重复 的 程序 代码 。 

使 用 JUnit 可 以 让 开发 人 员 轻 而 易 举 地 建立 测试 用 例 来 测试 类 的 方法 (Methods)。 使 用 


JUnit 平台 编写 单元 测试 用 例 ,就 如 同 在 编写 一 些 由 5 一 10 行程 序 代码 所 组 成 的 方法 一 样 简 
单 。 事 实 上 ,如 果 搭 配 某 些 开发 工具 ,甚至 不 需要 编写 任何 程序 代码 就 可 以 进行 测试 。 

(2) JUnit 的 测试 用 例 可 以 被 组 织 成 测试 组 合 (TestSuite) 。 

JUnit 的 测试 用 例 组 合 可 以 包含 多 个 测试 用 例 或 其 他 的 测试 用 例 组 合 ,如 此 一 来 ,开发 人 
员 就 可 以 在 一 个 测试 动作 中 完成 相关 方法 的 测试 。 

(3) JUnit 的 测试 结果 是 很 容易 收集 到 的 。 

JUnit 套件 中 提供 了 三 种 基本 的 测试 执行 环境 ,其 中 junit. textui, TestRunner 是 在 文字 
模式 下 执行 的 ,其 余 两 种 为 图 形 化 界面 。 更 为 重要 的 是 ,JUnit 是 免费 的 。 


12.1.2 安装 


首先 获取 JUnit 的 软件 包 , 从 http://www. junit. org 下 载 最 新 的 软件 包 ,将 软件 包 在 适 
当 的 目录 下 解 包 。 这 样 在 安装 目录 下 找到 一 个 名 为 junit. jar 的 文件 ,将 这 个 jar 文件 加 入 
CLASSPATH 系统 变量 ,就 可 以 在 文字 模式 下 执行 测试 用 例 了 。 如 果 有 使 用 的 Java 平台 ,可 
以 把 junit. jar 作为 一 个 external Libraries 引入 到 项 目 中 ,就 可 以 使 用 JUnit 的 图 形 化 界面 环 


境 测试 类 了 。 


注意 : 必须 保证 机 器 上 装 有 Java 的 JDK 环境 ,这 样 才 能 保证 JUnit 的 运行 。 


12.1.3 使 用 


1. JUnit 在 文字 模式 下 的 使 用 

JUnit 在 文字 模式 下 使 用 比较 简单 ,但 是 也 比较 枯燥 , 它 是 一 种 DOS 平台 下 的 方式 。 
为 了 完成 对 于 类 的 测试 ,首先 写 一 个 用 于 测试 的 类 。 

测试 用 的 类 : Money. java。 


public class Money { 


public Money ( int amount, String currency) { 


this. amount = amount ; 
this. currency = currency; 


public Money Add (Money money) { 


if (money. currency. equals (this. currency)) 
money. amount + = this. amount; 

else 
money. amount = 0; 

return money; 


private int amount; 
private String currency; 
public static void main(String[ ] args){ 


Money ml2CHF = new Money (12,"CHF"); //CHF 是 瑞士 法 郎 的 缩写 

Money m14CHF = new Money(14,"CHF"); 

Money result = ml2CHF.Add(m14CHF) ; 

System. out. print In ("result : "+result. amount + " " + result. currency) ; 


接着 选择 “开始 ”>“ 运 行 ” 命 令 , 输 入 “cmd" 命 令 , 进 入 DOS 环境 下 ,编译 ,运行 java 文件 。 


javac Money. java 命令 编译 java 文件 。 

java Money 运行 java 文件 。 

之 后 可 以 看 到 显示 : result: 26CHF 。 

这 样 的 写法 是 许多 程序 开发 人 员 最 常用 的 方法 ,但 如 此 一 来 ,就 必须 以 人 工 判断 程序 执行 
是 否 正常 。 现 在 看 看 如 何 使 用 JUnit 来 建立 一 个 测试 用 例 。 

(1) 编写 一 个 MoneyTest 类 ,并 继承 junit. framework. TestCase 包 中 的 TestCase 类。 

import junit. framework. TestCase ; 

public class MoneyTest extends TestCase { 

public MoneyTest () { 


} 
} 


(2) 在 MoneyTest 类 中 添加 一 个 testAdd() 的 方法 ,内 容 为 : 


public void testAdd() { 
Money m12GHF = new Money(12,"CHF"); 
Money m14GHF = new Money (14, "CHF") ; 
Money expectedReturn = new Money (26, "CHF") ; 
Money actualReturn = ml2CHF. Add (m1l4CHF) ; 
assertTrue (expectedReturn. equals(actualReturn)); 
} 


(3) 执行 TestRunner。 


java — cp $ {CLASSFATH}:/path/to/junit. jar:. juit. textui. TestRunner junit. samples. money. MoneyTest 

二 人 

此 处 是 以 文字 模式 的 junit. textui. TestRunner 来 运行 JUnit 测试 。 可 以 看 到 JUnit 顺利 
地 执行 了 MoneyTest 类 ,并 返回 "OK (1 tests)" ,表示 TestRunner 进行 了 一 项 测试 ,结果 全 部 

注意 : 当 没 有 重 写 (Override) junit. framework. TestCase 类 中 的 runTest() 方 法 时 ， 
TestRunner 将 会 自动 执行 所 有 命名 以 "test" 开 头 的 方法 ,如 testAdd ,testSub( 如 果 有 实现 这 
个 方法 的 话 ) 等 。 在 testAdd() 方 法 中 最 后 一 行 的 assertTrue() 则 是 JUnit Framework 中 用 
来 检查 测试 结果 的 API, 在 示范 的 程序 中 若 expectedReturn 和 actualReturn 相等 时 (以 equals 
() 方 法 传 回来 的 值 来 确定 ) ,JUnit 才 会 认为 此 测试 通过 。JUnit Framework 中 还 有 许多 其 他 
的 assert 方法 ,例如 assertEquals() \assertNotEquals() 等 。 

(4) 想 要 在 一 个 测试 类 中 进行 多 项 不 同 的 测试 ,而 又 不 想 在 每 个 测试 方法 中 编写 类 来 实 
例 化 一 个 对 象 ( 即 new Money(…)) ,此 时 就 可 以 加 载 stUp() 和 tearDown() 方 法 来 预先 建立 
“测试 配置 CTest Fixtures)”。 

private Money fl2CHF ; 

Private Money fl4CHF ; 

Private Money f28USD ; 

public void setUp () { 

fl12CHF = new Money(12, "CHF"); 


fl4CHF = new Money(14, "CHE"); 
f28USD = new Money(28, "USD"); 


TestRunner 会 在 执行 的 时 候 自 动 调用 setUp() ,并 在 测试 结束 前 调用 tearDown() 方 法 。 
类 中 所 有 的 测试 方法 直接 使 用 这 三 个 Money 对 象 。 因 此 ,前 面 的 testAdd() 可 以 改写 为 : 
public void testAdd() { 
// [12 CHF] + [14 CHF] == [26 CHF] 
Money expected = new Money(26,"CHF"); 
assertEquals (expected, f 12CHF. Add(f14CHF)); 
} 
(5) 要 如 何在 一 次 执行 中 运行 多 个 测试 呢 ?” 可 以 使 用 Test Suite( 测 试 组 合 ) 来 达成 愿望 ， 
在 MoneyTest 类 中 加 入 suite() 静 态 方法 。 
public static Test suite() { 
TestSuite suite = new TestSuite( ); 
suite.addTest(new MoneyTest("testMoneyEquals") ) ; 
suite. addTest (new MoneyTest ("testAdd")) ; 
return suite; 
} 
这 样 ,TestRunner 在 执行 时 便 会 根据 定义 的 测试 组 合 进 行 测试 。 若 没有 为 TestCase 类 
定义 suite() 方 法 ,那么 TestRunner 会 自动 执行 所 有 以 Test 开头 的 测试 方法 。 
2. JUnit 在 其 他 Java 平台 下 的 使 用 
1) 将 JUnit 集成 到 Eclipse 中 
(1) 首先 创建 一 个 Java 工程 ,添加 一 个 example. Money 类 ,在 Money 中 实现 Add() 方 
法 。 如 图 12-1 所 示 。 


1 package example; 
2 
3 public class Noney ( 
49 publio Money(int amount,String currency){ 
this.amount = emount; 
this.currency = currency; 


public Money hdd(Money money) { 
if (money.currency.equals (this.currency)) 
money.amount += this.amount; 
else 
money.amount = 0; 


return money; 
} 


private int amount; 
private String currency; 


图 12-1 创建 一 个 Java 工 程 


(2) 把 下 载 解压 后 的 junit. jar 包 引 入 到 项 目的 用 户 库 中 。 右 击 项 目 ,从 弹出 的 快捷 菜单 
中 选择 Properties 命令 ,在 Java Build Path 页 面 单 击 Add External JARs 按钮 ,找到 解压 后 的 
junit. jar 文件 添加 ,就 会 看 到 junit. jar 已 经 引入 到 项 目 中 了 。 如 图 12-2 所 示 。 

或 者 也 可 以 在 项 目 管理 器 中 看 到 引入 包 的 结果 ,如 图 12-3 所 示 。 

(3) 准备 对 Money 类 里 的 Add() 方 法 进行 测试 ,确保 能 够 正常 运行 。 选 中 Money. java 
类 右 击 ,从 弹出 的 快捷 菜单 中 选择 New>JUnit Test Case 命令 ,如 图 12-4 所 示 。 
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图 12-2 解压 包 引 入 项 目 图 12-3 在 管理 器 中 加 入 包 


出 现 New JUnit Test Case 对 话 框 ,新 建 一 个 MoneyTest 类 ,用 来 测试 Money 类 。 选 中 
setUp() 和 tearDown() 复 选 框 ,然后 单 击 Next 按钮 。 如 图 12-5 所 示 。 
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12-4 选择 JUnit Test Case 命令 图 12-5 ”新建 一 个 MoneyTest 类 


选择 要 测试 的 方法 Add(Money) , 单 击 Finish 按钮 。 如 图 12-6 所 示 。 
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图 12-6 选择 要 测试 的 方法 


在 MoneyTest 类 中 实现 testAdd() 方 法 ,如 图 12-7 所 示 。 


1 package exauople; 

2 

3Bimport junit.framevork. TestCase; 

4 

5 import org.junit.After; 

6 import org.junit.Before; 

7 import org.junit.Test; 

8 

9 public class NoneyTest extends TestCasel 

10 

119 BBeftore 

12 public void aecUp () throws Exception ( 

13 ) 

14 

159 BAfter 

16 public void tearDown() throvs Exception { 

17 ) 

18 

199 BTest 

0 public void testAdd{) ( 

pi Honey ml2CHF = new Noney(12,"CHF"); 

> Honey mi4CHF = new Money(14,"CHF"); 

3 Woney expectedReturn = new Honey(26,"CHF"); 
la Honey actualReturn = mi2CHF.Add (ml4CHF); 
5 assertTruelexpectedReturn.equals (actualReturn) ) ; 
ls 3 

7 

6 肌 

29 


12-7 在 MoneyTest 类 中 实现 testAdd() 方 法 


JUnit 大 致 会 以 下 面 的 顺序 执行 测试 : 


try{ 
MoneyTest test = new MoneyTest(): // 建 立 测试 类 实例 
test. setUp(); // 初 始 化 测试 环境 
test. testAdd(): // 测 试 某 个 方法 
test. tearDown(); // 清 理 资源 

} 


catch( Exception e) 


} 

setUp() 是 建立 测试 环境 ,这 里 创建 一 个 Money 类 的 实例 ; tearDown() 用 于 清理 资源 ,如 
释放 打开 的 文件 等 。 以 test 开头 的 方法 被 认为 是 测试 方法 ,JUnit 会 依次 执行 testXxx() 方 
法 。 在 testAdd() 方 法 中 ,对 Add() 的 测试 分 别 选择 正 数 、 负 数 和 0, 如 果 方法 返回 值 与 期 待 结 
果 相 同 , 则 assertEquals 不 会 产生 异常 。 如 果 有 多 个 testXxx 方法 ,JUnit 会 创建 多 个 
XxxTest 实例 ,每 次 运行 一 个 testXxx 方法 ,setUp() 和 tearDown() 会 在 testXxx 前 后 被 调 
用 ,因此 ,不 要 在 一 个 testA() 中 依赖 testB() 。 

(4) 直接 运行 Run-~>Run As->JUnit Test 命令 ,就 可 以 看 到 JUnit 测试 结果 : 

如 果 测 试 通过 了 , 则 会 显示 绿 条 ; 测试 没有 通过 , 则 显示 红 条 (这 可 能 和 绿灯 行 , 红 灯 停 一 
个 意思 )。 如 图 12-8 和 图 12-9 所 示 。 
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图 12-8 JUnit 测试 通过 的 界面 图 12-9 JUnit 测试 没有 通过 的 界面 


(5) 改进 上 面 的 测试 ,使 用 “测试 配置 ”进行 测试 ,使 用 setUp() 方 法 实例 化 对 象 ,使 用 
tearDown() 方 法 在 测试 结束 前 回收 测试 对 象 , 如 图 12-10 所 示 。 


MoneyTest .java 23 Money java 
1 package example; 


3 和 import junit.framevork. TestCase; 


5 import org.junit,After; 
6 import org.junit.Before; 
了 import org.junit,Test; 


9 public class NoneyTest extends TestCasell 
10 private Noney m12CHF; 


11 private Money ia 


139 BeBefore 
14 public void setUpl) throws Exception ( 
1s ml2CHF = new Noney(12,"CHF"); 

16 = new Noney(14,"CHF"); 

17 } 


199 BAfter 
zo public void tearDown() throws Exception { 
1 } 


35 BTest 
za public void testhddl() ( 

5 Honey expectedReturn = new Noney{(26,"CHF"); 

6 assertTruelexpectecdReturn.equals (m12CHF .hdd (GEE) ) ) ; 


本 } 


12-10 ”使 用 “测试 配置 ”进行 测试 


(6) 使 用 套件 。 

2) 将 JUnit 集成 到 WebSphere Studio 中 

(1) 将 JUnit 集成 进 Application Developer。 

Oy 将 解压 后 的 junit. jar 文件 复制 到 Application Developer 的 plugins 目录 下 。 

@ 打开 Application Developer 工作 台 。 

@ 选择 Window 一 Preferences 命令 。 

@ 在 Preferences 对 话 框 中 ,选择 Plug-In development。 如 图 12-11 所 示 。 

@ 右边 的 窗口 会 显示 所 有 已 经 装 入 的 插件 , 单 击 Reload 按钮 重新 装 入 JUnit 插件 。 
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图 12-11 装 和 JUnit 插件 


重新 启动 Application Developer。 

@ 选择 Perspective->Show view->Other->Java。 

@ 在 Java 透视 图 中 找到 JUnit 视图 。 

(2) 运行 测试 用 例 。 

设置 用 来 运行 测试 用 例 的 项 目 : 

@ 打开 Java 透视 图 。 

@ 创建 一 个 Java 项 目 , 命 名 为 SimpleJavaProject。 

@ 在 该 项 目的 上 下 文 菜单 中 选择 Properties 命令 。 

@ 在 Java 的 Properties 对 话 框 中 选择 Java build path。 

@ 在 右边 的 窗口 中 选择 Libraries 选项 卡 。 

@ 单 击 Add External JAR 按钮 。 

从 二 Application Developer 二 \pluginsN\org. juint\ 目 录 中 选择 junit. jar。 

@ 想 要 看 到 JUnit 的 源 代码 ,需要 从 上 述 目 录 中 添加 src. jar。 

加 添加 了 junit. jar( 或 和 src. jar) 之 后 ,再 将 它们 添加 到 库 中 ,如 图 12-12 中 突出 显示 的 部 
分 所 示 。 


四 在 所 选项 目的 Properties 对 话 框 中 单 击 OK 按钮 。 

创建 一 个 样本 类 : 

@ 打开 Java 透视 图 。 

@ 在 上 面 创建 SimpleJavaProject 项 目的 Simple 包 中 创建 一 个 名 为 Money. java 的 类 。 
@ 在 Java 编辑 器 中 打开 Money. java, 添 加 代码 并 保存 ,如 图 12-12 所 示 。 


package Simple; Ee 


public class Noney { 
9 public Noney(lint amount,String currency){ 
this.amount = amount; 
this.currency = currency; 
上 


上 自 public Money Add(NMoney money){ 
if (money.currency.equals (this.currency)) 
money. amount += this.amount; 
else 
money.amount = 0; 
return money; 
上 


9 public GE equals (Money noney)1 
if (money.currency.equals(this.currency) && woney.amount == this.amount) 


private int amount; 
private String currency; 


图 12-12 在 Money. java 中 添加 代码 


@ Money. java 中 包含 一 个 Add() 方 法 和 一 个 重 写 的 equals() 方 法 。 在 这 里 只 测试 Add 
() 方 法 。 

创建 样本 测试 用 例 : 

@ 打开 Java 透视 图 。 

@ 在 SimpleJavaProject 项 目的 Testcase 包 中 创建 一 个 名 为 MoneyTest. java 的 类 。 

@ 在 Java 编辑 器 中 打开 MoneyTest. java, 添 加 代码 并 保存 ,如 图 12-13 所 示 。 

@ assertTrue 语句 用 来 验证 结果 与 预期 输出 是 否 一 致 : 


assertTrue(expectedReturn. equals(actualReturn) ); 


如 果 actualReturn 和 expectedReturn 不 匹配 , 它 将 在 输出 中 列 出 测试 失败 情况 。 

@@ 上 面 的 测试 用 例 中 包含 Money. java 中 关于 Add( ) 方 法 的 两 个 测试 。testAdd() 演 示 
了 一 个 成 功 测试 的 输出 ,testAddl() 演 示 了 一 个 失败 测试 的 输出 。 可 以 发 现 两 个 测试 并 没有 
很 大 的 区 别 , 只 是 断言 不 同 ,testAdd() 方 法 使 用 assertTrue 断言 ,而 testAdd1() 方 法 使 用 
assertEquals 断言 。 那 为 什么 会 第 一 个 成 功 ,而 第 二 个 失败 呢 ?” 因 为 这 是 面向 对 象 语言 的 特 
点 ,对 于 比较 两 个 类 来 说 ,要 同时 满足 equals() 和 hashcode() 都 匹配 才能 相等 ,而 在 这 里 是 两 
个 对 象 ,所 以 后 面 的 测试 方法 就 不 能 通过 。 

运行 测试 用 例 : 


[DD Noney. java 国 NoneyTest java 33 sm 


package Testcase; 4 


图 import junic.framework,TestCase; 口 
public class MoneyTest extends TestCaset 


9 BBefore 
public void setUpl() throws Exception { 
} 


9 BAfter 
public void tearbown() throws Exception { 
和 


9 public void tescaiaa()t 
Money m12CHF = new Koney(12,"CHF"); 
Noney ml4CHF = new Koney{14,"CHF"); 
Noney expectedReturn = new Honey(26,"CHF"); 
Noney actualReturn = m12CHF. Mdd (m14CHF); 
assertTruelexpectedReturn. equals (actualheturn)); 
) 


目 publio void resckdalf)t 
Money ml2CHF = new Koney{(12,"CHF"); 
Money ml14CHF = new Koney(14,"CHF"); 
Money expectedReturn = new Noney(25,"CHF"); 
Money actualRecurn = m12CHF, Mdd (m14CHF); 
assertEqualslexpectedReturn,actualReturn); 


图 12-13 在 MoneyTest.java 中 添加 代码 


Q@ 打开 Java 透视 图 。 

@ 确保 下 面 两 个 类 编译 正确 : 

Simple. Money. java 

Testcase. MoneyTest. java 

@ 在 Packages 视图 中 选择 测试 用 例 MoneyTest。 

@ 在 工具 栏 中 选择 Run 一 Junit tests 命令 。 

@ 如 果 Debug 透视 图 已 打开 ,返回 Java 透视 图 。 

@ JUnit 视图 打开 ,显示 测试 用 例 的 结果 。 

(3) 关于 JUnit 视图 。 

当 运 行 测试 用 例 时 ,JUnit 视图 会 被 激活 。 它 将 通过 一 个 红色 的 状态 条 显示 测试 中 的 失 
败 , 如 图 12-14 所 示 。JUnit 视图 用 两 页 选项 卡 显示 测试 用 例 的 结果 。 
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图 12-14 ”Failures 选项 卡 


图 12-15 显示 了 JUnit 视图 中 Hierarchy 选项 卡 的 用 户 界面 。 它 列 出 了 所 有 的 测试 案例 
以 及 它们 的 执行 情况 。 测 试 名 称 前 面 绿 色 的 “VY” 表示 测试 成 功 (三 | testhdd ), 而“X” 


( 般 testAdaal ) 则 表示 测试 失败 。 如 果 所 有 的 测试 都 是 成 功 的 ,那么 JUnit 视图 将 显示 一 条 绿 
色 的 状态 条 ,如 图 12-16 所 示 。 


Paenes eee | x 
inished ofter 0.047 seconds 总 
时 全 本 闻 |% 俯 加固 ” 


Buns’ 2/2 BErrors: 0 BFsilues: 1 


Runs: 2/2 日 Brrors: 0 日 Failures: 0 


丽 Tastease HoneyTest [Rannar- JUnit 4] 
testAdd 


本 


国 Testease. NoneyTest [Runner, JUnit 4] 
testhdd 
大 testhaal 


图 12-15 JUnit 选项 卡 图 12-16 ”执行 成 功 结果 


除了 上 述 信息 之 外 ,JUnit 视图 还 提供 了 下 列 测试 结果 : 

。 全 部 测试 中 已 完成 的 测试 数目 : 指定 被 提交 要 执行 的 测试 总 数 中 已 执行 的 测试 数目 。 

。 错误 数目 : 指定 在 执行 全 部 测试 过 程 中 遇 到 的 错误 总 数 。 

。 失败 数目 : 指定 在 执行 断言 语句 过 程 中 遇 到 的 失败 总 次 数 。 

。 Application Developer 状态 条 : 指定 完成 测试 所 耗费 的 时 间 。 

(4) 过 滤器 模式 。 

过 滤器 模式 被 用 来 从 测试 失败 通知 中 过 滤 掉 不 感 兴趣 的 堆栈 帧 。 

定义 过 滤器 模式 : 

@ 从 Application Developer 工具 栏 中 选择 Window 一 Preferences 命令 。 

@ 选择 JUnit。 

@ 右边 的 窗口 将 显示 堆栈 过 滤器 模式 列表 。 图 12-17 显示 了 过 滤器 模式 的 列表 和 输入 
新 的 过 滤器 模式 的 对 话 框 。 
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图 12-17 堆栈 过 滤器 模式 


@ 想 要 将 新 的 模式 加 进 列表 , 则 单 击 Add 按钮 。 

@@ 想 要 从 列表 中 删除 模式 , 则 单 击 Remove 按钮 过 滤 掉 失败 通知 中 不 感 兴趣 的 堆栈 帧 。 

选择 Filter stack trace entries failed tests 复 选 框 过 滤 已 添加 的 堆栈 过 滤器 模式 。 取 消 选 
择 Filter stack trace failed tests 复 选 框 来 禁用 过 滤 机 制 。 

(5) 测试 用 例 方式 。 

测试 用 例 可 以 在 下 列 两 种 方式 下 启动 。 

在 前 面 的 示例 中 ,测试 用 例 是 在 Run 方式 下 启动 的 ,如 图 12-18 所 示 。 如 果 和 希望 看 到 失败 
测试 用 例 的 详细 信息 , 则 需要 在 Debug 方式 下 启动 ,如 图 12-19 所 示 。 
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图 12-18 在 Run 方式 下 启动 测试 用 例 图 12-19 在 Debug 方式 下 启动 测试 用 例 


在 Debug 方式 下 启动 测试 用 例 或 测试 套件 : 

@ 在 Package Explorer 中 选择 测试 用 例 或 测试 套件 。 

四 单 击 菜单 栏 中 的 Debug 图 标 ,出 现 一 个 下 拉 列 表 。 

@ 选择 Debug 一 JUnit Tests 命令 , 遇 到 断 点 时 挂 起 控制 将 打开 Debug 透视 图 。 


12.2 开源 负载 压力 测试 工具 Jmeter 


12.2.1 Jmeter 的 基本 框架 


JMeter 最 早 是 为 了 测试 Tomcat 的 前 身 JServ 的 执行 效率 而 诞生 的 。 它 的 测试 能 力也 不 
再 仅仅 只 局 限于 对 于 Web 服务 器 的 测试 ,而 是 涵盖 了 数据 库 JMS、Web Service、LDAP 等 多 
种 对 象 的 测试 能 力 。 在 2.1.1 以 上 的 版 本 中 , 它 还 提供 了 对 于 JUNIT 的 测试 。 

JMeter 的 安装 非常 简单 ,从 http: //jakarta. apache. org/jmeter 上 下 载 ,解压 之 后 即 可 使 
用 。 在 %JMETER_HOME%/bin 下 运行 命令 ,对 于 Windows 用 户 来 说 ,命令 是 jmeter. bat。 
运行 前 请 检查 JMeter 的 文档 ,查看 是 否 具备 相关 的 运行 条 件 。 对 于 2. 1. 1 以 上 的 版 本 需要 
JDK 的 版 本 要 求 。 

JMeter 的 主要 测试 组 件 总 结 如 下 : 

(1) 测试 计划 是 使 用 JMeter 进行 测试 的 起 点 , 它 是 其 他 JMeter 测试 元 件 的 容器 。 

(2) 线程 组 代表 一 定数 量 的 并 发 用 户 , 它 可 以 用 来 模拟 并 发 用 户 发 送 请 求 。 实 际 的 请 求 
内 容 在 Sampler 中 定义 , 它 被 线程 组 包含 。 

(3) 监听 器 负责 收集 测试 结果 ,同时 也 被 告知 了 结果 显示 的 方式 。 

(4) 逻辑 控制 器 可 以 自 定义 JMeter 发 送 请 求 的 行为 逻辑 , 它 与 Sampler 结合 使 用 可 以 模 
拟 复 杂 的 请 求 序列 。 

(5) 断言 可 以 用 来 判断 请 求 响应 的 结果 是 否 如 用 户 所 期 望 的 。 它 可 以 用 来 隔离 问题 域 ， 


即 在 确保 功能 正确 的 前 提 下 执行 压力 测试 。 这 个 限制 对 于 有 效 的 测试 是 非常 有 用 的 。 

(6) 配置 元 件 维护 Sampler 需要 的 配置 信息 ,并 根据 实际 的 需要 会 修改 请 求 的 内 容 。 

(7) 前 壮 处 理 器 和 后 置 处 理 器 负责 在 生成 请 求 之 前 和 之 后 完成 工作 。 前 署 处 理 器 常常 用 
来 修改 请 求 的 设置 ,后 置 处 理 器 则 常常 用 来 处 理 响应 的 数据 。 

(8) 定时 器 负责 定义 请 求 之 间 的 延迟 间隔 。 


12.2.2 常用 测试 范围 


就 J2EE 的 平台 下 开发 的 软件 来 说 ,测试 的 节点 通常 可 能 是 Web 服务 器 、 数 据 库 服 务 器 
和 JMS 服务 器 。 它 们 都 是 请 求 主要 发 生 的 地 点 ,请 求 频率 较 其 他 的 节点 要 高 ,而 且 处 于 请 求 
序列 的 关键 路 径 之 上 。 如 果 它 们 的 效率 无 法 提高 的 话 , 对 于 整个 软件 的 效率 有 致命 的 影响 。 
而 且 在 这 些 节 点 上 一 般 都 会 发 生 较 大 规模 的 数据 交换 ,有 时 其 中 还 包含 有 业务 迎 辑 处 理 , 它 们 
正 是 在 进行 压力 测试 时 首先 需要 考虑 的 。 

下 面 以 Web 服务 器 压力 测试 为 例 介 绍 其 应 用 。 


12.2.3 Web 服务 器 测试 


对 于 大 多 数 的 项 目 来 说 ,并 不 会 自行 开发 一 个 Web 服务 器 ,因此 Web 服务 器 压力 测试 的 
对 象 实际 就 是 发 布 到 Web 服务 器 中 的 软件 。 最 简单 的 Web 测试 计划 只 需要 三 个 JMeter 的 
测试 元 件 , 如 图 12-20 所 示 。 


其 中 ， 里 区 济 试 计划 
。 在 线程 组 中 定义 线程 数 、 产 生 线 程 发 生 的 时 间 和 测试 循环 9 琶 引 组 
次 数 AFTER 
。 回 用 表 属 素 兰 蒜 果 
。 在 HTTP 请求 中 定义 服务 器 .端口 .协议 和 方法 .请 求 路 
径 等 。 图 12-20 最 简单 的 Web 


计划 
。 表 格 监 听 器 负责 收集 和 显示 结果 。 玉林 类 


这 种 设置 对 于 包含 了 安全 机 制 的 Web 应 用 是 不 够 的 ,典型 的 Web 应 用 一 般 都 会 : 

(1) 有 一 个 登录 页 , 它 是 整个 应 用 的 入 口 。 当 用 户 登录 之 后 ,应 用 会 将 用 户 相 关 的 安全 信 
息 放 到 session 中 。 

(2) 有 一 个 filter, 它 拦截 请 求 , 检 查 每 个 请 求 相关 的 session 中 是 否 包 含有 用 户 安全 信 
息 。 如 果 没 有 ,那么 请 求 被 重 定向 到 登录 页 ,要 求 用 户 提供 安全 信息 。 

在 这 种 配置 下 应 用 上 面 的 测试 计划 ,那么 除了 登录 页 之 外 的 其 他 请 求 都 将 因为 缺少 用 户 
安全 信息 而 使 请 求实 际 定位 到 登录 页 。 如 果 不 加 断言 .那么 在 监听 器 看 来 所 有 的 请 求 都 是 成 
功 的 。 而 实际 上 ,这 些 请 求 最 终 都 没有 到 达 它 们 应 该 去 的 地 方 。 显 然 , 这 种 测试 结果 不 是 我 们 
所 期 望 的。 为 了 成 功 地 测试 ,至 少 有 两 种 方法 : 

方法 一 : 去 掉 程 序 的 安全 设置 .如 filter, 使 得 不 需要 用 户 安全 信息 也 能 访问 受 限 内 容 。 

方法 二 : 不 修改 程序 ,使 用 JMeter 提供 的 “Http URL 重 写 修 饰 符 ” 或 “Http Cookie 管 

对 于 第 一 种 方法 ,有 其 局 限 性 : 

@ 需要 修改 程序 配置 ,如 去 掉 web. xml 中 关于 安全 filter 的 设置 。 需 要 维护 多 个 版 本 的 
web. xml, 如 压力 测试 和 功能 测试 分 别 有 各 自 的 web. xml, 增 加 了 维护 成 本 ,而 且 有 可 能 会 在 
测试 之 后 忘记 将 web. xml 修改 回来 。 


@ 对 于 一 些 需 要 用 户 安全 信息 的 页 面 无 能 为 力 , 如 某 些 业务 审计 操作 需要 用 户 安全 信息 
来 记录 。 因 为 缺少 这 样 的 信息 ,注定 了 测试 的 失败 。 如 果 为 了 解决 这 个 问题 进一步 修改 程序 ， 
那么 因为 存在 多 个 版 本 的 程序 ,那么 其 维护 难度 将 大 大 增加 。 

虽然 第 二 种 方法 的 配置 难度 增加 了 ,但 是 它 不 用 修改 程序 ,而 且 还 可 将 测试 计划 保存 成 文 
件 , 以 便 重 复 使 用 。 因 此 ,选用 第 二 种 方法 是 较为 理想 的 做 法 。 下 面 以 一 个 简化 的 例子 说 明 使 
用 方法 二 的 配置 步骤 。 

(1) 例子 由 以 下 几 个 文件 组 成 : 

@@ AuthorizenFilter. java。 过 滤器 负责 检验 session 中 是 否 存在 用 户 人 信息。 如果 没有 , 那 
么 就 转向 到 login. jsp。 它 的 主要 方法 doFilter 的 内 容 如 下 : 


public void doFilter(ServletRequest request, 
ServletResponse response, 
FilterChain chain) 
throws IOException, ServletException { 
HttpServletRequest req = (HttpServletRequest)request; 
HttpServletResponse res = (HttpServletResponse)response; 
HttpSession session = req. getSession(); 
User user = (User)session.getAttribute("user"); 
if(null == user){ 
String uri = req.getRequestURI(); 
// 如 果 请 求 页 是 登录 页 ,不 转向 
if( uri.equalsIgnoreCase("/gWeb/login. jsp")){ 
chain. doFilter(request, response); 
} else{ 
res. sendRedirect("/gWeb/login. jsp"); 
} 
}else{ 
chain. doFilter(request, response); 
} 
} 


@ User. java。 用 户 类 负责 记录 用 户 的 信息 。 为 了 简化 ,这 里 的 登录 操作 只 人 允许 指定 用 
户 名 和 密码 。 主 要 内 容 如 下 : 


public class User { 

Private String user; 

Private String pwd; 

public User(String user, String pwd) { 
this. user = user; 
this. pwd = pwd; 

} 

public boolean login(){ 
return user. equals( "foxgem") && pwd. equals("12345678") ; 

} 

public String getUser() { 
return user; 

} 

public void setUser(String user) { 
this. user = user; 


} 


@ Login. jsp 和 welcome. jsp。 其 中 login. jsp 负责 生成 User 对 象 ,并 调用 User 的 login。 当 
login 返回 为 true 时 转向 到 welcome.jsp。 其 验证 部 分 的 代码 如 下 : 


<% 
if( request. getParameter("Submit") != null) { 
User ur = new User( request. getParameter("user"), request. getParameter("pwd")); 
if( ur. login()){ 
session. setAttribute( "user", ur); 
response. sendRedirect(" /gWeb/welcome. jsp"); 
} else{ 
session. setAttribute( "LOGIN ERROR MSG", 
"无 效 的 用 户 ,可 能 原因 : 用 户 不 存在 或 被 禁用 。"); 
response. sendRedirect("/gWeb/ index. jsp"); 


return; 
} 
} 
%> 
加 web. xml。 配 置 filter 拦截 所 有 访问 JSP 页 面 的 请 求 。 
<filter > 


<filter - name > authorizen </filter — name> 

< filter - class > org. foxgem. jmeter. AuthorizenFilter </filter - class> 
</filter> 
<filter— mapping> 

<filter - name > authorizen </filter — name> 

<url- pattern>* . jsp</url - pattern> 
</filter - mapping> 


(2) 创建 Web 测试 计划 ,结构 如 图 12-21 所 示 。 


其 中 主要 测试 元 件 说 明 如 下 : 多 加 济 斌 计划 

。 HTTP 请 求 默 认 负 责 记录 请 求 的 默认 值 , 如 服务 器 、 协 9 Fn 
» 0 HTTP 请 求 
议和 端口 等 。 加 mem 

。 第 一 个 HTTP 请 求 , 请 求 是 login. jsp, 并 附加 验证 所 需 扩 HTTP 计 来 呐 认 位 
要 的 参数 (user = foxgem, pwd 二 12345678, Submit 一 ? 人 i 
Submit)。 其 包含 的 响应 断言 验证 url 中 包含 welcome. D hrm 
jsp, 这 一 点 可 以 从 程序 中 反应 。 eat 


。 第 二 个 HTTP 请 求 ,请求 是 welcome. jsp。 其 包含 的 
响应 断言 验证 响应 文本 中 包含 foxgem, 它 是 welcome. 图 12-21 创建 Web 测试 计划 
jsp 页 面 凶 和 辑 的 一 部 分 。 

。 http cookie 管理 器 负责 管理 整个 测试 过 程 中 使 用 的 cookie, 它 不 需要 设置 任何 属性 。 

。 循环 控制 器 设置 发 送 第 二 个 请 求 的 循环 次 数 ,表格 监听 器 负责 收集 和 显示 第 二 个 请 求 
的 测试 结果 。 

启动 测试 计划 之 后 ,执行 的 顺序 是 : 首先 ,第 一 个 请 求 登录 页 进行 登录 ; 成 功 登录 之 后 ， 

使 用 循环 控制 器 执行 第 二 个 请 求 。 请 求 welcome. jsp 时 ,响应 断言 用 来 验证 是 否 确实 是 
welocme. jsp 来 处 理 请 求 ,而 不 是 因为 其 他 页 。 在 这 个 测试 计划 中 需要 注意 的 是 http cookie 
管理 器 。 正 是 由 于 它 的 作用 ,使 得 第 二 个 请 求 能 顺利 地 发 送 到 welcome. jsp 进行 处 理 , 而 不 是 
因为 缺少 用 户 安全 信息 转发 到 login. jsp。 


在 这 个 例子 中 ,并 没有 在 程序 中 使 用 cookie( 使 用 的 是 session) ,那么 http cookie 管理 器 
怎么 会 起 作用 呢 ? 这 是 因为 在 servlet/jsp 规范 中 对 于 session 的 状态 跟踪 有 两 种 方式 : 

(1) 使 用 cookie, 保 留 和 传递 sessionid。 它 不 要 求 程序 对 于 url 有 什么 特殊 的 处 理 , 但 是 
要 求 浏览 器 允许 cookie。 在 这 个 例子 中 就 是 这 种 情形 。 

(2) 使 用 url 重 写 ,每 次 显 式 地 在 浏览 器 和 服务 器 之 间 传 递 sessionid。 它 要 求 程序 对 url 
进行 编码 ,对 浏览 器 没有 要 求 。 

对 于 第 二 种 情形 ,可 以 使 用 JMeter 前 置 管理 器 中 的 http url 重 写 修饰 符 来 完成 。 对 于 
Tomcat, Session 参数 是 jsessionid, 路 径 扩 展 使 用 "; ”。 使 用 url 编码 时 需要 注意 ,必须 将 浏览 
器 的 cookie 功能 关闭 。 因 为 url 编码 函数 ,如 encodeURL ,会 判断 是 否 需 要 将 sessionid 编码 
到 url 中 。 当 浏览 器 允许 cookie 时 ,就 不 会 进行 编码 。 

如 果 是 cookie 而 不 是 session 来 保存 用 户 安全 信息 ,那么 直接 使 用 http cookie 管理 器 就 
行 了 。 此 时 ,需要 将 使 用 的 cookie 参数 和 值 直接 写 到 管理 器 中 ,由 它 负责 管理 。 对 于 其 他 的 
cookie 使 用 ,也 是 如 此 操作 。 

登录 问题 解决 之 后 ,对 于 Web 服务 器 的 测试 就 没什么 难点 了 。 剩 下 的 就 是 根据 实际 需 
要 ,灵活 运用 相关 的 测试 组 件 搭建 编写 的 测试 计划 进行 测试 了 。 
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附 录 A 


2°3 7 一 4 00101110001 
000 01001011100 
011 01011100010 
101 01110001001 
110 10001001011 
10010111000 
2°44°1 7 一 8 10111000100 
00000 11000100101 
00112 11100010010 
01011 LULLLIRLLLL 
01103 
10013 2^43^1 n=12 
10101 00000 
11002 00111 
11110 00112 
01002 
3 ^4 7 一 9 01010 
0000 01101 
0121 10001 
0212 10012 
1022 10100 
1110 11011 
1201 11102 
2011 11110 
2102 
2220 2^26^1 # 一 12 
000 
六 人 7 一 12 002 
00010010111 004 


00100101110 011 


013 
015 
101 
103 
105 
110 
112 
114 


2*88*1 7 一 16 
000000000 
000011114 
001100112 
001111006 
010101011 
010110105 
011001103 
011010017 
100101107 
100110013 
101001015 
101010101 
110000116 
110011002 
111100004 
111111110 


4°5 1 一 16 
00000 
01111 
02222 
03333 
10123 
11032 
12301 
13210 
20231 
21320 
22013 
23102 


30312 
31203 
32130 
33021 


346 6“^1 n 
0000000 
0011221 
0102212 
0120123 
0212104 
0221015 
1002125 
1020214 
1111110 
1122001 
1201203 
1210022 
2012013 
2021102 
2101024 
2110205 
2200111 
2222220 
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六 1 一 20 

0000110010011110101 
0001100100111101010 
0010011110101000011 
0011001001111010100 
0011110101000011001 
0100001100100111101 
0100111101010000110 
0101000011001001111 
0110010011110101000 
0111101010000110010 
1000011001001111010 
1001001111010100001 
1001111010100001100 
1010000110010011110 


1010100001100100111 
1100100111101010000 
1101010000110010011 
1110101000011001001 
1111010100001100100 
1111111111111111111 


5°1 n=20 
000000000 
000010111 
000110002 
000111113 
001101014 
010001003 
011001102 
011010014 
011100110 
011111101 
100101104 
101000113 
101011012 
101011100 
101100001 
110001011 
110010104 
110100112 
110111010 
111110003 


2*2 10°1 7 一 20 
000 
002 
004 
006 
008 
011 
013 
015 
017 
019 


101 
103 
105 
107 
109 
110 
112 
114 
116 
118 


2^13 3^1 4^1 

000000000000000 
000100101101122 
000111011011021 
001001011100013 
001011100001112 
001110110110100 
010001110111101 
010010111000123 
010111000101003 
011010001110111 
011100010010022 
011101101011010 
100010010111012 
100011101110020 
100101110010113 
101000111001001 
101101000100121 
101110001011103 
110001001010102 
110100011101110 
110110100000011 
111000100111023 
111011010001120 
111111111100002 


7 一 24 


2°12 12^1 7 一 24 


000010010111 6 
000100101110 5 


000101110001 2 
001001011100 4 
001011100010 1 


001 


1000100110 


010001001011 7 
010010111000 3 


010 


1100010011 


011000100101 8 
011100010010 9 


011 


11111111 0 


100000000000 0 
100011101101 9 


100 


11011010 8 


10100011101111 


101 
101 


01000111 3 
10110100 7 


11000111011010 
110100011101 1 


110 


10100011 4 


111010001110 2 
111011010001 5 
111101101000 6 


2^11 4°1 6°1 
0000000000000 
0001001011024 
0001110110015 
0010010111132 
0010111000022 
0011101101101 
0100011101011 
0100101110134 
0101110001130 
0110100011013 
0111000100125 
0111011010103 
1000100101123 
1000111011105 
1001011100033 
1010001110110 


7 一 24 


1011010001114 
1011100010031 
1100010010121 
1101000111002 
1101101000112 
1110001001035 
1110110100004 
1111111111020 


5°6 7 一 25 
000000 
012341 
024132 
031423 
043214 
104324 
111110 
123401 
130242 
142033 
203143 
210434 
222220 
234011 
241302 
302412 
314203 
321044 
333330 
340121 
401231 
413022 
420313 
432104 
444440 


3 人 人 人 7 一 27 
0000000000 
0001112221 
0002221112 


0120120123 
0121202014 
0122011205 
0210210216 
0211022107 
0212101028 
1020212108 
1021021026 
1022100217 
1110002222 
1111111110 
1112220001 
1200122015 
1201201203 
1202010124 
2010121204 
2011200125 
2012012013 
2100211027 
2101020218 
2102102106 
2220001111 
2221110002 
2222222220 


S09" 7 一 36 
00000010010011001 
00000100000101010 
00010001111001100 
00011110111110111 
00100111101110014 
00101010101001017 
00101100111000103 
00111001010100004 
00111111000111102 
01001001000010113 
01001010100100108 
01010101011110107 
01010111001000018 
01011000001111005 


01100011011001112 
01101101110011015 
01110000110100016 
01110110100011106 
10001011011010006 
10001101001101116 
10010011100111013 
10010111110000115 
10011100100000002 
10100001110111108 
10100010001100105 
10110000000010117 
10111100011011018 
11000000111110012 
11000100101011104 
11001111110101007 
11011010010001114 
11100101000000001 
11101110010110110 
11110110011101003 
11111001101101111 
11111011101010000 


2^13 3^2 6^1 7 一 36 


0000011110010023 
0000011110101211 
0000011111010105 
0001100110111014 
0001100111001202 
0001100111100120 
0011011000101000 
0011011001001224 
0011011001110112 
0101110000000015 
0101110000110203 
0101110001011121 
0110000100001104 
0110000100010210 
0110000101110022 
0110101010101113 


0110101011000001 
0110101011111225 
1000101000000120 
1000101000011202 
1000101001110014 
1010110100111105 
1010110101001023 
1010110101100211 
1011000010010001 
1011000010100225 
1011000011011113 
1100010010101022 
1100010011011210 
1100010011100104 
1101001100111121 
1101001101001015 
1101001101100203 
1111111110000112 
1111111110010224 
1111111111111000 


2^13 6°2 7 一 36 
000000000101105 
000010110010051 
000100010110032 
000110101010144 
000111111101045 
001000111010123 
001011000001021 
001101101111052 
001110000111110 
010001110111114 
010010011101122 
010101001000011 
010101110000000 
011001100100143 
011010100001034 
011011011100150 
011100011011003 
011111001010135 


100011001110013 
100011101000102 
100101100011120 
100111010001133 
101000101100030 
101000111001015 
101011010110004 
101100010100141 
101101011001154 
110000000010155 
110001111111131 
110010011011040 
110100001100024 
110110100101053 
111001000011042 
111110101111101 
111110110000112 
111111110110025 


2^10 3^8 6^1 7 一 36 


0000000000001100114 
0000000000112211220 
0000000000220022002 
0010011111010112122 
0010011111121220204 
0010011111202001010 
0011110001002222003 
0011110001110000115 
0011110001221111221 
0100111010020201011 
0100111010101012123 
0100111010212120205 
0101100111011020020 
0101100111122101102 
0101100111200212214 
0111001100022012215 
0111001100100120021 
0111001100211201103 
1001001011010121213 
1001001011121202025 


1001001011202010101 
1001111100022021124 
1001111100100102200 
1001111100211210012 
1010100110011002201 
1010100110122110013 
1010100110200221125 
1100010101001111005 


1100010101112222111 
1100010101220000223 
1110101001020210100 
1110101001101021212 
1110101001212102024 
1111010010002200222 
1111010010110011004 
1111010010221122110 
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附录 B 


英文 术语 


中 文 术语 


对 应 的 说 明 


Abstract Test Case 


抽象 测试 用 例 


参见 High Level Test Case 


Acceptance 


验收 


参见 Acceptance Testing 


Acceptance Criteria 


验收 准则 


为 了 满足 组 件 或 系统 使 用 者 、 客 户 或 其 
他 授权 实体 的 需要 ,组 件 或 系统 必须 达 
到 的 准则 (IEEE 610) 


Acceptance Testing 


验收 测试 


一 般 由 用 户 / 客 户 进行 的 确认 是 否 可 以 
接受 一 个 系统 的 验证 性 测试 。 是 根据 用 
户 需求 ,业务 流程 进行 的 正式 测试 ,以 确 
保 系统 符合 所 有 验收 准则 (与 IEEE 610 
= 


Accessibility Testing 


可 达 性 测试 


可 达 性 测试 就 是 测试 残疾 人 或 不 方便 的 
人 使 用 软件 或 者 组 件 的 容易 程度 。 即 被 
测试 的 软件 是 否 能 够 被 残疾 或 者 部 分 有 
障碍 人 士 正常 使 用 ,这 其 中 也 包含 了 正 
常人 在 某 些 时 候 发 生 暂 时 性 障碍 的 情况 
下 正常 使 用 ,如 怀抱 婴儿 等 


Accuracy 


软件 产品 提供 的 结果 的 正确 性 一致 性 
和 精确 程度 的 能 力 (ISO9126)。 参 见 


Functionality Testing 


Actual Outcome 


参见 Actual Result 


Actual Result 


组 件 或 系统 测试 之 后 产生 或 观察 到 的 
行为 


Ad Hoc Review 


非 正 式 评审 (和 正式 的 评审 相 比 》 


Ad Hoc Testing 


非 正 式 的 测试 执行 。 即 没有 正式 的 测试 
准备 、 规 格 设计 和 技术 应 用 ,也 没有 期 望 
结果 和 必须 遵循 的 测试 执行 指南 


Adaptability 


软件 产品 无 须 进行 额外 修改 ,而 适应 不 
同 特定 环境 的 能 力 (ISO9126)。 参 
见 Probability 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
对 使 用 敏捷 方法 ,如 极限 编程 开发 的 项 目 进行 的 软件 测试 ， 
Op 本 强调 测试 优先 行 的 设计 模式 , 见 Test Driven Development 
Algorithm Test [TMap] | 算法 测试 参见 Branch Testing 
由 潜在 用 户 或 者 独立 的 测试 团队 在 开发 环境 下 或 者 模拟 实 
Alpha Testing Alpha 测试 际 操作 环境 下 进行 的 测试 ,通常 在 开发 组 织 之 外 进行 。 通 
常 是 对 现货 软件 (COTS) 进 行内 部 验收 测试 的 一 种 方式 
i 软件 产品 缺陷 或 运行 失败 原因 可 被 诊断 的 能 力 , 或 对 修改 
人 下 部 分 的 可 识别 能 力 (1SO 9126) 。 参 见 Maintainability 
Analyzer 分 析 器 参见 Static Analyzer 
任何 和 基于 需求 文档 .设计 文档 ,用 户 文档 ,标准 或 者 个 人 
的 期 望 和 预期 之 间 偏差 的 情况 都 可 以 称 为 异常 。 异 常 可 以 
二 异常 在 但 不 限于 下 面 的 过 程 中 识别 : 评审 (Review) 、 测 试 分 析 
(Test Analysis) ,编译 (Compilation) .软件 产品 或 应 用 文档 
的 使 用 等 。 参 见 Defect、Deviation、Error、Fault、Failure、 
Incident Problem 
Arc Testing 弧 测试 参见 Branch Testing 
Attractiveness 吸引 力 软件 产品 吸引 用 户 的 能 力 (ISO 9126)。 参 见 Usability 
对 软件 产品 或 过 程 进行 的 独立 评审 ,来 确认 产品 是 否 满足 
Audit 审计 标准 、 指 南 、 规 格 说 明 书 以 及 基于 客观 准则 的 步骤 等 ,包括 
下 面 的 文档 : (1) 产 品 的 内 容 与 形式 ;(2) 产 品 开 发 应 该 遵 
循 的 流程 ; (3) 度 量 符合 标准 或 指南 的 准则 (IEEE 1028) 
以 过 程 输出 作为 起 点 ,追溯 到 原始 输入 (例如 数据 ) 的 路 径 。 
Wi 有 利于 缺陷 分 析 和 过 程 审计 的 开展 
Automated Testware 自动 测试 件 用 于 自动 化 测试 中 的 测试 件 ,如 工具 脚本 
Krailibility 可 用 性 用 户 使 用 系统 或 组 件 的 可 操作 和 易 用 的 程度 ,通常 以 百 分 
比 的 形式 出 现 (IEEE 610) 
用 相同 的 输入 ,执行 组 件 或 系统 的 两 个 或 多 个 变量 ,在 产生 
Back-To-Back Testing 比 对 测试 偏差 的 时 候 , 对 输出 结果 进行 比较 和 分 析 
通过 正式 评审 或 批准 的 规格 或 软件 产品 。 以 它 作为 继续 开 
Baseline 基线 发 的 基准 。 并 且 在 变更 的 时 候 , 必 须 通 过 正式 的 变更 流程 
来 进行 (与 IEEE 610 一 致 ) 
Basic Block 基本 块 一 个 或 多 个 连续 可 执行 的 语句 块 ,不 包含 任何 分 支 语句 
根据 组 件 的 内 部 结构 或 规格 说 明 书 设计 的 一 组 测试 用 例 
Basis Test Set 基本 测试 集 集 。 通 过 执行 这 组 测试 用 例 ,可 以 保证 达到 100%% 的 指定 覆 
盖 准 则 (Coverage Criterion) 的 要 求 
Bebugging 错误 散播 参见 Error Seeding 
Behavior 行为 组 件 或 系统 对 输入 值 和 预 置 条 件 的 反应 
(1) 为 使 系统 或 组 件 能 够 进行 度量 和 比较 而 制定 的 一 种 测 
Benchmark Test 基准 测试 试 标准 ; (2) 用 于 组 件 或 系统 之 间 进 行 的 比较 ,或 和 (1) 中 提 
到 的 标准 进行 比较 的 测试 (与 IEEE 610 一 致 ) 
Bp tba 定制 软件 为 特定 的 用 户 定制 开发 的 软件 。 与 之 对 比 的 是 现货 软件 


(Off-The-Shelf Software) 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
和 最 佳 实践 在 界定 范围 内 ,帮助 提高 组 织 能 力 的 有 效 方法 或 创新 实践 ， 
通常 被 同行 业 组 织 视 为 最 佳 的 方法 或 实践 
用 户 在 开发 组 织 外 ,没有 开发 人 员 参 与 的 情况 下 进行 的 测 
Beta Testing Beta 测试 试 ,检验 软件 是 否 满足 客户 及 业务 需求 。 这 种 测试 是 软件 
产品 获得 市 场 反馈 进行 验收 测试 的 一 种 形式 
非 增 量 集成 测试 的 一 种 方法 ,测试 的 时 候 将 软件 单元 、 硬 件 
， 单元 或 者 两 者 同时 (而 不 是 阶段 性 的 ) 集 成 到 组 件 或 者 整个 
Se 大 爆 作 测试 。 | 系统 中 去 进行 测试 (与 IEEE 610 一 致 :。 参 见 
Integration Testing 
Black-Box Technique 黑 盒 技术 参见 Black Box Test Design Technique 
Black-Box Testing 黑 盒 测 试 不 考虑 组 件 或 系统 内 部 结构 的 功能 或 非 功能 测试 
Black-Box Test Design 黑 盒 测试 设计 | 基于 系统 功能 或 非 功 能 规格 说 明 书 来 设计 或 者 选择 测试 用 
Technique 技术 例 的 技术 ,不 涉及 软件 内 部 结构 
渐 增 式 集 成 测试 的 一 种 ,其 策略 是 先 测 试 底层 的 组 件 , 以 此 
Bottom-Up Testing 自 底 向 上 测试 为 基础 逐步 进行 更 高 层次 的 组 件 测 试 ,直到 系统 集成 所 有 
的 组 件 。 参 见 Integration Testing 
通过 分 析 输 入 或 输出 变量 的 边界 或 等 价 划 分 (Equivalence 
Boundary Value 边界 值 Partition) 的 边界 来 设计 测试 用 例 ,例如 取 变 量 的 最 大 值 . 最 
小 值 .中间 值 . 比 最 大 值 大 的 值 比 最 小 值 小 的 值 等 
Boundary Value Analysis | 边界 值 分 析 ee ae 
Boundary Value Coverage | 边界 值 覆盖 0 ee dd 
Boundary Value Testing | 边界 值 测试 参见 Boundary Value Analysis 
在 组 件 中 ,控制 从 任何 语句 到 其 他 任何 非 直 接 后 续 语 句 的 
Branch 分 支 一 个 条 件 转换 ,或 者 是 一 个 无 条 件 转 换 。 例 如 Case、Jump、 
Go To、If-Then-Else 语句 
Branch Condition 分 支 条 件 参见 条 件 (Condition) 
en ConditioaiCombb | 分 赤 大 必 是 合 参见 Multiple Condition Coverage 
nation Coverage 覆盖 
Brn an i 参见 Multiple Condition Testing 
nation Testing 测试 
Branch i 
Gondition Coverage 分 支 条 件 覆 盖 参见 Condition Coverage 
执行 一 个 测试 套件 (Test Suite) 所 能 覆盖 的 分 支 (Branch) 的 
百分比 。100% 的 分 支 覆 盖 (Branch Coverage) 是 指 100%% 判 
Se i 定 条 件 覆 盖 (Decision Coverage) 和 100% 的 语句 覆盖 
(Statement Coverage) 
Bug 缺陷 参见 Defect 
Bug Report 缺陷 报告 参见 Defect Report 
Business Process-Based | 基业 务 过 程 |_ 种 天 于 业务 撒 述 和 /或 业务 流程 的 测试 用 例 设计 方法 
Testing 测试 


续 表 
英文 术语 中 文 术 语 对 应 的 说 明 
Ce Wa ead 描述 有 效 的 软件 开发 过 程 关键 元 素 的 一 个 5 个 等 级 的 框 
a 能 力 成 熟 度 模型 | 架 ,能力 成 熟 度 模型 包含 了 在 软件 开发 和 维护 中 计划 工程 
和 管理 方面 的 最 佳 实践 (Best Practice) ,缩写 为 CMM 
描述 有 效 的 软件 产品 开发 和 维护 过 程 的 关键 元 素 框架 ,能 
Capability Maturity Model 
es 0 力 成 熟 度 模型 集成 包含 了 软件 开发 计划 .工程 和 管理 等 方 
ae 面 的 最 佳 实践 ,是 CMM 指定 的 继承 版 本 
一 种 执行 测试 工具 ,能 够 捕获 在 手工 测试 过 程 中 的 输入 ,并 
且 生 成 可 执行 的 自动 化 脚本 用 于 后 续 阶 段 的 测试 (回放 过 
Septure/Pleyback Tool | 捕获 / 国 放 工具 | 程 )。 这 类 工具 通常 使 用 在 自动 化 回归 测试 (Regression 
Test) 中 
Capture/Replay Tool 捕获 /回放 工具 | 参见 Capture/Playback Tool 
CASE Computer Aided Software Engineering 的 首 字 母 缩写 
Computer Aided Software Testing 的 首 字母 缩写 ,参见 Test 
CAsT 计算 机 稍 助 软件 | Automation。 在 测试 过 程 中 使 用 计算 机 软件 工具 进行 辅助 
测试 
的 测试 
示 结 。 
， 通过 因果 图 (Case-Effect Graph) 设 计 测 试用 例 的 一 种 黑 盒 
Cause-Effect Graphing 因果 图 技术 测试 设计 技术 
Cause-Effect Analysis 因果 分 析 参见 因果 图 技术 (Case-Effect Graphing) 
Eee ne 0 | 因果 决策 表 。 | 参见 决策 表 (Decision Tabla) 
able 
人 认证 确认 一 个 组 件 ,系统 或 个 人 具备 某 些 特定 要 求 的 过 程 ,比如 
通过 了 某 个 考试 
Changeability 可 变性 软件 产品 适应 修改 的 能 力 (ISO 9126) ,参见 Maintainability 
Change Control 变更 控制 参见 Configuration Control 
Change Control Board 本 委员 参见 Configuration Control Board 
Checker 检验 员 参见 评审 员 (Reviewer) 
Chow's Coverage Metrics | N 切换 覆盖 度量 | 参见 N 切换 覆盖 (N-Switch Coverage) 
Classification 分 类 树 方法 运用 分 类 树 法 进行 的 一 种 黑 盒 测试 设计 技术 ,通过 输入 和 / 
Tree Method 或 输出 域 的 组 合 来 设计 测试 用 例 
Cod 代码 计算 机 指令 和 数据 定义 在 程序 语言 中 的 表达 形式 或 是 汇编 
程序 、 编 译 器 或 其 他 翻译 器 的 一 种 输出 形式 
Code Analyzer 代码 分 析 器 参见 静态 分 析 器 (Static Code Analyzer) 
一 种 分 析 方 法 ,用 于 确定 软件 的 哪些 部 分 被 测试 套件 (Test 
i 羡 
een 代码 覆盖 Suite) 覆 盖 到 了 ,哪些 部 分 没有 。 例 如 语句 覆盖 (Statement 


Coverage)、 判定 覆盖 (Decision Coverage) 和 条 件 覆 盖 
(Condition Coverage) 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Code-Based Testing 基于 代码 的 测试 | 参见 White Box Testing 
区 二 共存 性 软件 产品 与 通用 环境 下 与 之 共享 资源 的 其 他 独立 软件 之 间 
ea 共存 的 能 力 [ISO 9126]。 参 见 可 移植 性 (Portability) 
Sommereial Of Te Se | 商业 现货 软件 “| 参见 现货 软件 (Off-The Shelf Software) 
Software 
Comparator 比较 器 参见 Test Comparator 
a 将 高 级 命令 语言 编写 的 程序 翻译 成 能 运行 的 机 器 语言 的 工 
Compiler 编译 器 具 (IEEE 610) 
Complete Testing 完全 测试 参见 穷尽 测试 (Exhaustive Testing) 
Completion Criteria 完成 准则 参见 退出 准则 (Exit Criteria) 
nl 复杂 性 系统 或 组 件 的 设计 和 /或 内 部 结构 难于 理解 、 维 护 或 验证 的 
SY 程度 。 参 见 Cyclomatic Complexity 
i 一 致 性 软件 产品 与 法 律 和 类 似 规定 的 标准 、 惯 例 或 规则 的 一 致 性 
方面 的 能 力 (ISO 9126) 
Compliance Testing 一 致 性 测试 确定 组 件 或 系统 是 否 满足 标准 的 测试 过 程 
Component 组 件 一 个 可 被 独立 测试 的 最 小 软件 单元 
Re 组 件 集成 测试 为 发 现 集成 组 件 接口 之 间 和 集成 组 件 交互 产生 的 缺陷 而 执 
Integration Testing 行 的 测试 
根据 组 件 的 功能 定义 为 特定 输入 而 应 该 产生 的 输出 规格 进 
Component Specification | 组 件 规格 说 明 行 的 功能 性 和 非 功能 性 行为 的 描述 。 例 如 资源 使 用 
(Resource Utilization) 
i 通过 逻辑 操作 符 (AND,OR 或 者 XOR) 将 两 个 或 多 个 简单 
Ne 条 件 连接 起 来 ,如 A>0 AND B<1000 
Concrete Test Case 具体 测试 用 例 参见 低 阶 测试 用 例 (Low Level Test Case) 
局 并 发 测试 测试 组 件 或 系统 的 两 个 或 多 个 活动 在 同样 的 间隔 时 间 内 如 
人 何 交叉 或 同步 并 发 (与 IEEE 610 一 致 
Condition 条 件 一 个 可 被 判定 为 真 、 假 (True, False) 的 逻辑 表达 式 。 例 如 
A>B 
的 条 件 组 合 覆盖 参见 多 条 件 覆 盖 (Multiple Condition Coverage) 
Combination Coverage 
og 条 件 组 合 测试 参见 多 条 件 测试 (Multiple Condition Testing) 
Combination Testing 
执行 测试 套件 (Test Suite) 能 够 覆盖 到 的 条 件 百分比 。 
Condition Coverage 条 件 覆盖 100% 的 条 件 覆盖 要 求 测试 到 每 一 个 条 件 语句 真 、 假 (True， 
False) 的 条 件 
Cond 执行 测试 套件 (Test Suite) 覆 盖 到 的 能 够 独立 影响 判定 结果 
a 条 件 决定 覆盖 的 单个 条 件 的 百分比 。100% 的 条 件 决定 覆盖 意味 着 100% 
- 的 判定 条 件 履 盖 
Condition 一 种 白 盒 测 试 技术 ,是 对 能 够 独立 影响 决策 结果 的 单独 条 
Determination Testing 条 件 决定 测试 件 的 测试 
Condition Testing 条 件 测试 一 种 白 盒 测 试 技术 ,设计 测试 用 例 以 执行 条 件 的 结果 


Condition Outcome 


条 件 结果 


条 件 判 定 的 结果 ,为 真 或 假 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Confidence Test 置信 测试 参见 冒 烟 测试 (Smoke Testing) 
会 设置 一 
bi 配置 oe 个 组 件 或 者 
ee ee 配置 审核 对 配置 库 及 配置 项 的 内 容 进行 检查 的 过 程 ,比如 检查 标准 
‘ontiguration uditing 的 一 致 性 (IEEE 610) 
配置 管理 的 一 个 方面 ,包括 在 正式 配置 完成 之 后 对 配置 项 
Configuration Control 配置 控制 进行 评价 ,协调 、 批 准 或 撤销 ,以 及 变更 修改 的 控制 (IEEE 
610) 
Configuration Control Board 负责 评估 ,批准 或 拒绝 配置 项 修改 的 组 织 ,此 组 织 应 确保 被 
(CCB) 配置 控制 委员 会 | 批准 的 配置 修改 的 执行 (IEEE 610) 
Configuration 配置 标识 配置 管理 的 要 素 之 一 ,包括 选择 配置 项 ,并 在 技术 文档 中 记 
Identification 录 其 功能 和 物理 特性 (IEEE 610) 
ri 配置 项 配置 管理 中 的 硬件 .软件 或 软 硬 件 结合 体 的 集合 ,在 配置 管 
ee 理 过 程 中 通常 被 当做 一 个 实体 (IEEE 610) 
一 套 技术 和 管理 方面 的 监督 原则 ,用 于 确定 和 记录 一 个 配 
Configuration 配置 管理 置 项 的 功能 和 物理 属性 ,控制 对 这 些 属性 的 变更 ,记录 和 报 
Management 告 变 更 处 理 和 实现 的 状态 ,以 及 验证 与 指定 需求 的 一 致 性 
(IEEE 610) 
Configuration 配置 管理 工具 支持 对 配置 项 进行 识别 ,控制 ,变更 管理 ,版 本 控制 和 发 布 
Management Tool 配置 项 基线 (Baseline) 的 工具 [IEEE 610] 
Configuration Testing 配置 测试 参见 可 移植 性 测试 (Portability Testing) 
Confirmation Testing 确认 测试 参见 再 测试 (Re-Testing) 
Conformance Testing 一 致 性 测试 参见 符合 性 测试 (Compliance Testing) 
Canaiok _ 致 性 在 系统 或 组 件 的 各 组 成 部 分 之 间 和 文档 之 间 无 矛盾 ,一 致 ， 
En 符合 标准 的 程度 [IEEE 610] 
Control Flow 控制 流 执行 组 件 或 系统 中 的 一 系列 顺序 发 生 的 事件 或 路 径 
Control lion Gap 控制 流 图 os a 
Control Flow Path 控制 流 路 径 参见 路 径 (Path) 
Conversion Testing 转换 (移植 ) 测 试 ett 
Commercial Off-The-Shelf Software 的 首 字母 缩写 。 参 见 
Co 现货 软件 Off-The-Shelf Software 
用 于 确定 执行 测试 套件 所 能 覆盖 项 目的 程度 ,通常 用 百 分 
Coverage 覆盖 
比 来 表示 
, 对 测试 执行 结果 进行 特定 的 覆盖 项 分 析 , 判 断 其 是 否 满足 
Cem ole ss 预先 定义 的 标准 ,是 否 需要 设计 额外 的 测试 用 例 
Ge i 覆盖 项 作为 测试 覆盖 的 基础 的 一 个 实体 或 属性 ,如 等 价 划 分 
ee (Equivalent Partitions) 或 代码 语句 (Code Statement) 等 
有 蕾 的 结构 元 
ee od 覆盖 工具 对 执行 测试 套件 (Test Suite) 能 够 覆盖 的 结构 元 素 如 语句 


(Statement)、 分 支 (Branch) 等 进行 客观 测量 的 工具 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Custom Software 定制 软件 参见 Bespoke Software 
程序 中 独立 路 径 的 数量 。 一 种 代码 复杂 度 的 衡量 标准 ,用 
来 衡量 一 个 模块 判定 结构 的 复杂 程度 ,数量 上 表现 为 独立 
现行 路 径 条 数 , 即 合理 地 预防 错误 所 需 测试 的 最 少 路 径 条 
vaccinelaiy 圈 复 杂 度 数 。 圈 复杂 度 大 说 明 程序 代码 可 能 质量 低 且 难于 测试 和 维 
护 ,根据 经 验 ,程序 的 可 能 错误 和 高 的 圈 复 杂 度 有 着 很 大 关 
系 。 圈 复杂 度 =L-N 十 2P, 其 中 工 表示 为 结构 图 (程序 图 ) 
的 边 数 ; N 为 结构 图 (程序 图 ) 的 节点 数目 ; P 为 无 链接 部 
分 的 数目 (与 McCabe 一 致 
Cyclomatic Number 圈 数 参见 Cyclomatic Complexity 
: 每 天 对 整个 系统 进行 编译 和 链接 的 开发 活动 ,从 而 保证 在 
Bd 和 任何 时 候 包含 所 有 变更 的 完整 系统 是 可 用 的 
Data Definition 数据 定义 给 变量 赋 了 值 的 可 执行 语句 
将 测试 输入 和 期 望 输出 保存 在 表格 中 的 一 种 脚本 技术 。 通 
过 这 种 技术 ,运行 单个 控制 脚本 就 可 以 执行 表格 中 所 有 的 
Data Driven Testing 数据 驱动 测试 ”| 测试 。 像 录制 /回放 这 样 的 测试 执行 工具 经 常会 应 用 数据 
驱动 测试 方法 [Fewster And Graham]。 参 见 Keyword 
Driven Testing 
数据 对 象 的 顺序 和 可 能 的 状态 变换 的 抽象 表示 ,对 象 的 状 
态 可 以 是 创建、 使 用 和 销毁 
Data Flow Analysis 数据 流 分 析 一 种 基于 变量 定义 和 使 用 的 静态 分 析 (Static Analysis) 模 式 
Data Flow Coverage 数据 流 覆 盖 执行 测试 套件 (Test Suite) 能 够 覆盖 已 经 定义 数据 流 的 百分比 
一 种 白 盒 测 试 设计 技术 ,设计 的 测试 用 例 用 来 测试 变量 的 
Data Flow Testing 数据 流 测 试 定义 和 使 用 路 径 
Data Integrity Testing 数据 完整 性 测试 | 参见 Database Integrity Testing 
a 对 数据 库 的 存 取 和 管理 进行 测试 的 方法 和 过 程 ,确保 数据 
mr 吉本 这 完整 售 | 库 如 对 期 一 林 进 行 丰 取 ,处 理 等 数据 功能 ,同时 也 确保 数 所 
在 存 取 过 程 中 没有 出 现 不 可 预料 的 删除 、 更 新 和 创建 
Dead Code 死 代 码 参见 Unreachable Code 
Debugger 调试 器 参见 Debugging Tool 
Debugging 调试 发 现 , 分 析 和 去 除 软 件 失败 根源 的 过 程 
程序 员 用 来 复 现 软 件 失败 、 研 究 程序 状态 并 查找 相应 缺陷 
Debugging Tool 调试 工具 的 工具 。 调试 器 可 以 让 程序 员 单 步 执 行程 序 ,在 任何 程序 
语句 中 终止 程序 和 设置 检查 程序 变量 
ado 判定 有 两 个 或 多 个 可 替换 路 径 控 制 流 的 一 个 程序 控制 点 ,也 是 
连接 两 个 或 多 个 分 支 的 节点 
执行 测试 用 例 套 件 (Test Suite) 能够 覆盖 的 条 件 结果 
Decision 判定 条 件 著 盖 (Condition Outcomes) 和 判定 结果 (Decision Outcomes) 的 百 
Condition Coverage 分 比 ,100% 的 判定 条 件 覆盖 意味 着 100%% 的 判定 覆盖 和 
100%% 的 条 件 覆 盖 
一 种 白 盒 测 试 (White Box) 设 计 技 术 , 设 计 的 测试 用 例 用 来 
判定 条 件 测试 测试 条 件 结果 (Condition Outcomes) 和 判定 结果 (Decision 


Condition Testing 


Outcomes) 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
执行 测试 套件 能 够 覆盖 的 判定 结果 (Decision Outcomes) 的 
a 百分比 。100% 的 判定 覆盖 (Decision Coverage) 意味 着 
ee nas 100% 的 分 支 材 盖 (Branch Coverage) 和 100% 的 语句 禾 盖 
(Statement Coverage) 
一 个 可 用 来 设计 测试 用 例 的 表格 ,一 般 由 条 件 桩 ,行动 柱 和 
Re lis 条 件 规 则 条 目 及 行动 规则 条 目 组 成 
Ee , 一 种 黑 盒 测试 设计 技术 ,设计 的 测试 用 例 用 来 测试 判定 表 
Se pe ee 站 中 各 种 条 件 的 组 合 (Veenendaal) 
Decision Testing 决策 测试 白 盒 测试 设计 技术 的 一 种 ,设计 测试 用 例 来 执行 判定 结果 
Decision Outcome 判定 结果 判定 的 结果 (可 以 用 来 决定 执行 哪 条 分 支 ) 
可 能 会 导致 软件 组 件 或 系统 无 法 执行 其 定义 的 功能 的 瑕 
Defect 缺陷 疣 ,例如 错误 的 语句 或 变量 定义 。 如 果 在 组 件 或 系统 运行 
中 遇 到 缺陷 ,可 能 会 导致 运行 的 失败 
将 软件 组 件 或 系统 的 缺陷 数 和 软件 或 者 组 件 规模 相 比 的 一 
Defect Density 缺陷 密度 种 度量 (标准 的 度量 术语 ,包括 每 千 行 代码 、 每 个 类 或 功能 
点 存在 的 缺陷 数 ) 
Defect Detection Percentage 在 一 个 测试 阶段 发 现 的 缺陷 数 除 以 在 测试 阶段 和 之 后 其 他 
(DDP) 锯 了 发现 百分比 “所 自发 现 的 缺陷 总 数 所 得 的 百分比 数 
发 现 、 研 究 , 处 置 .去 除 缺 陷 的 过 程 。 包 括 记录 缺陷 .分 类 缺 
En 陷 和 识别 缺陷 可 能 造成 的 影响 (与 IEEE 1044 一 致 
一 个 方便 记录 和 跟踪 缺陷 的 工具 ,通常 包括 以 缺陷 修复 操 
作 流程 为 引导 的 任务 分 配 .缺陷 修复 、 重 新 测试 等 行为 的 跟 
Defect Management Tool | 缺陷 管理 工具 踪 和 控制 ,并 且 提 供 文档 形式 的 报告 。 见 Incident 
Management Tool 
ee 缺陷 屏蔽 i IEEE 610 
对 造成 软件 组 件 或 系统 不 能 实现 预期 功能 的 缺陷 进行 描述 
Defect Report 缺陷 报告 的 报告 文件 
Defect Tracking Tool 缺陷 跟踪 工具 参见 Defect Management Tool 
机 he 变量 在 程序 中 定义 和 使 用 的 相关 性 ,变量 使 用 包括 变量 计 
Se 定义 使用 对 。 | 算 (比如 乘 ) 或 者 变量 引导 程序 执行 一 条 路 径 (预定 义 ) 
Deliverable 交付 物 过 程 中 生成 的 交付 给 客户 的 (工作 ) 产 品 
. i 根据 组 件 或 系统 的 构架 或 详细 设计 设计 测试 用 例 的 一 种 测 
DesienBased Testing 。 | 基于 设计 的 测试 | 试 方法 (例如 组 件 或 系统 之 间接 口 的 测试 
通 区 行 来 对 i 和 见 
Desk Checking 桌面 检查 通过 手工 模拟 执行 来 对 软件 或 规格 说 明 进行 的 测试 。 参见 
Static Analysis 
通常 在 开发 环境 下 ,开发 人 员 在 组 件 或 系统 实现 过 程 中 进 
有 人 il 行 的 正式 或 非 正式 的 测试 (与 IEEE 610 一 致 ) 
Deviation 偏离 参见 Incident 
Deviation Report 偏离 报告 参见 Incident Report 
Dirty Testing 负面 测试 参见 Negative Testing 
Documentation Testing 文档 测试 关于 文档 质量 的 测试 ,例如 对 用 户 手 册 或 安装 手册 的 测试 
Domain 域 一 个 可 供 有 效 输入 或 输出 值 选择 的 集合 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
a 了 驱动 器 代替 某 个 软件 组 件 来 模拟 控制 或 调用 其 他 组 件 或 系统 的 软 
件 或 测试 工具 (与 TMap 一 致 ) 
; s 区 组 件 或 系统 的 执行 过 程 中 对 其 行为 评估 的 过 程 ,例如 对 内 
Re En 存 性 能 .CPU 使 用 率 等 的 估算 (与 IEEE 610 一 臻 
为 程序 代码 提供 实时 信息 的 工具 。 通 常用 于 识别 未 定义 的 
Dynamic Analysis Tool 动态 分 析 工具 指针 ,检测 指针 算法 和 内 存 地 址 分 配 、 使 用 及 释放 的 情况 以 
及 对 内 存 泄露 进行 标记 
; 在 软件 运行 过 程 中 (例如 用 测试 工具 执行 ) ,对 实际 结果 和 
Dynamic Comparison 动态 比较 期 望 结果 的 比较 
Dynamic Testing 动态 测试 通过 运行 软件 的 组 件 或 系统 来 测试 软件 
Efficiency 效率 一 定 条 件 下 根据 资源 的 使 用 情况 ,软件 产品 能 够 提供 适当 
性 能 的 能 力 (ISO 9126) 
Efficiency Testing 效率 测试 确定 测试 软件 产品 效率 的 测试 过 程 
Elementary 基本 比较 测试 一 种 黑 盒 测 试 设计 技术 ,根据 判定 条 件 覆 盖 的 理念 ,设计 测 
Comparison Testing 试用 例 来 测试 软件 各 种 输入 的 组 合 LTMap] 
me 仿真 器 一 个 接受 同样 输入 并 产生 同样 输出 的 设备 ,计算 机 程序 或 
系统 [IEEE 610]。 参 见 Simulator 
进入 下 一 个 任务 (如 测试 阶段 ) 必 须 满足 的 条 件 。 准 和 条件 
Entry Criteria 入 口 准 则 的 目的 是 防止 执行 不 能 满足 准 入 条 件 的 活动 而 浪费 资源 
(Gilb And Graham) 
Entry Point 入口 点 一 个 组 件 的 第 一 个 可 执行 语句 
Equivalence Class 等 价 类 参见 Equivalence Partition 
Equivalence Partition 等 价 类 划分 ep ye ree 
Co 9 | 等 从 划分 覆盖 。 | 执行 测试 套件 能 够 覆盖 到 的 等 人 类 的 百分比 
黑 盒 测试 用 例 设 计 技 术 , 该 技术 从 组 件 的 等 价 类 中 选取 典 
Equivalence Partitioning “| 等 价 类 划分 技术 | 型 的 点 进行 测试 。 原 则 上 每 个 等 价 类 中 至 少 要 选取 一 个 典 
型 的 点 来 设计 测试 用 例 
Error 错误 人 为 地 产生 不 正确 结果 的 行为 (与 IEEE 610 一 致 ) 
根据 测试 人 员 以 往 的 经 验 ,猜测 在 组 件 或 系统 中 可 能 出 现 
Error Guessing 错误 推测 的 缺陷 以 及 错误 ,并 以 此 为 依据 来 进行 特殊 的 用 例 设 计 以 
暴露 这 些 缺 陷 
在 组 件 或 系统 中 有 意 插 和 一些 已 知 缺陷 (Defect) 的 过 程 , 目 
Error Seeding 错误 散播 的 是 为 了 得 到 缺陷 的 探测 率 和 除去 率 ,以 及 评估 系统 中 遗 
留 缺陷 的 数量 (IEEE 610) 
Error Tolerance 容错 组 件 或 系统 存在 缺陷 的 情况 下 保持 连续 正常 工作 状态 的 能 
力 (与 IEEE 610 一 致 ) 
Evaluation 评估 参见 Testing 
- - 组 件 或 系统 对 错误 输入 的 行为 反应 。 错 误 输 入 包括 人 为 的 
人 输入 ,其 他 组 件 或 系统 的 输入 以 及 内 部 失败 引起 的 输入 等 
Executable Statement 可 执行 语句 la sl at 


可 以 按 步骤 执行 ,并 且 可 以 对 数据 进行 相应 的 操作 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Exercised 被 执行 测试 用 例 运行 后 被 执行 的 语句 、 判 定 和 程序 的 结构 元 素 
全 
这 vec 穷尽 测试 RN 合 的 测 
和 利益 相关 者 达成 一 致 的 系列 通用 和 专门 的 条 件 ,来 正式 
地 定义 一 个 过 程 的 结束 点 。 出 口 准则 的 目的 可 以 防止 将 没 
Exit Criteria 出 口 准则 有 完成 的 任务 错误 地 看 成 任务 已 经 完成 。 测 试 中 使 用 的 出 
口 准 则 可 以 来 报告 和 计划 什么 时 候 可 以 停止 测试 (与 Gilb 
和 Graham 一 致 ) 
Exit Point 出 口 点 组 件 中 最 后 一 个 可 执行 语句 
Expected Outcome 预期 结果 参见 Expected Result 
在 特定 条 件 下 根据 规格 说 明 或 其 他 资源 说 明 , 组 件 或 系统 
疆 
Expected Result 预期 结果 预测 的 行为 
Experienced-Based Test | 基于 经 验 的 测试 | 根据 测试 人 员 的 经 验 、 知 识 和 直觉 来 进行 用 例 设 计 或 选择 
Design Technique 设计 技术 的 一 种 技术 
非 正式 的 测试 设计 技术 。 测 试 人 员 能 动 地 设计 一 些 测试 用 
Exploratory Testing 探索 性 测试 例 ,通过 执行 这 些 测试 用 例 和 在 测试 中 得 到 的 信息 来 设计 
新 的 更 好 的 测试 用 例 ( 和 Bach 一 致 ) 
i 失败 假如 测试 的 实际 结果 与 预期 结果 不 一 样 ,就 认为 这 个 测试 
的 状态 为 失败 
组 件 /系统 与 预期 的 交付 、 服 务 或 结果 存在 的 偏差 (与 
Failure 失效 
Fenton 一 致 ) 
失效 在 物理 上 或 功能 上 的 表现 。 例如 ,系统 在 失效 模式 下 
Failure Mode 失效 模式 可 能 表现 为 运行 缓慢 、 输 出 错误 或 者 执行 的 彻底 中 断 (IEEE 
610) 
Failure Mode And Effect | 失效 模式 和 影响 | 一 个 系统 进行 风险 识别 和 标识 可 能 的 失效 模式 的 系统 方 
Analysis( FMEA) 分 析 法 ,用 来 预防 失效 的 发 生 
Failure Rate 失效 率 指定 类 型 中 单位 度量 内 发 生 失 效 的 数目 。 例 如 单位 时 间 失 
效 数 .单位 处 理 失效 数 .单位 计算 机 运行 失效 数 [IEEE 610] 
Fault 故障 参见 Defect 
Fault Density 故障 密度 参见 Defect Density 
参见 Defect Detection Percentage 
Fault Masking 故障 屏蔽 参见 Defect Masking 
软件 产品 存在 故障 或 其 指定 接口 遭 到 破坏 时 ,继续 维持 特 
容 
Ce 必用 容 区 定性 能 级 别 的 能 力 (1SO 9126) 。 参 见 Reliability 
Fault Tree Analysis 故障 树 分 析 分 析 产 生 故 障 原因 的 一 种 方法 
Feasible Path 可 达 路 径 可 通过 一 组 输入 值 和 入 口 条 件 而 执行 到 的 一 条 路 径 
需求 文档 指定 的 或 包含 的 一 个 组 件 或 者 系统 的 属性 ,例如 
Feature 特性 Reliability、Usability 或 者 Design Constraints( 与 IEEE 1008 
一 数 ) 
Field Testing 现场 测试 参见 Beta Testing 
态 态 一 种 证 同 
ee alins 有 限 状态 机 包含 有 限 数 目 状态 和 状态 之 间 转 换 的 一 种 计算 模型 ,同时 


可 能 伴随 一 些 可 能 的 (触发 ) 行 为 (IEEE 610) 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 

Finite State Testing 有 限 状 态 测试 参见 State Transition Testing 

RE 正式 评审 对 评审 过 程 及 需求 文档 化 的 一 种 特定 的 评审 。 例如 检视 
(Inspection) 

a i i 冻结 测试 基准 测试 基准 文档 ,只 能 通过 正式 的 变更 控制 过 程 进行 修正 。 
参见 Baseline 

i Ais 对 信息 系统 功能 进行 规模 度量 的 一 种 方法 。 该 度量 独立 于 

CFPAY 功能 点 分 析 具体 的 技术 实现 ,可 以 作为 生产 率 度量 、 资 源 需 求 估 算 和 项 
目 控制 的 基础 

i 功能 集成 合并 组 件 /系统 ,以 尽早 实现 基本 功能 的 一 种 集成 方法 。 参 
见 Integration Testing 

Functional Requirement ”| 功能 需求 指定 组 件 / 系 统 必须 实现 某 项 功能 的 需求 (IEEE 610) 

,4 | 通过 对 组 件 或 系统 的 功能 规格 说 明 分 析 来 进行 测试 用 例 的 
Feneriona Test Design | 区 能 测试 设计 | 设计 和 /或 选择 的 过 程 ,该 过 程 不 涉及 软件 的 内 部 结构 。 参 
Technique 技术 : 

见 Black Box Test Design Technique 

通过 对 组 件 /系统 功能 规格 说 明 的 分 析 而 进行 的 测试 。 参 
Functional Testing 功能 测试 见 Black Box Testing 
Bet 功能 性 软件 产品 在 规定 条 件 下 使 用 时 ,所 提供 的 功能 达到 宣称 的 

和 隐 含 需求 的 能 力 (ISO 9126) 
Functionality Testing 功能 性 测试 判断 软件 产品 功能 性 的 测试 过 程 
Glass Box Testing 玻璃 盒 测 试 参见 White Box Testing 
一 种 静态 可 用 性 测试 技术 ,判断 用 户 接口 和 公认 的 可 用 性 
Heuristic Evaluation 启发 式 评估 原则 的 符合 度 
没有 具体 的 (实现 级 别 ) 输 入 数据 和 预期 结果 的 测试 用 例 。 
High Level Test Case 概要 测试 用 例 实际 值 没有 定义 或 是 可 变 的 ,而 用 逻辑 概念 来 代替 。 参 见 
Low Level Test Case 
一 个 测试 级 别 的 需求 和 相应 级 别 的 测试 文档 (例如 测试 计 
Horizontal Traceability 水 平 可 追踪 性 划 ,测试 设计 规格 ,测试 用 例 规格 和 测试 过 程 规格 或 测试 脚 
本 ) 之 间 的 可 追踪 性 
Impact Analysis 影响 分 析 对 需求 变更 所 造成 的 开发 文档 ,测试 文档 和 组 件 的 修改 的 评估 
Incident 事件 任何 有 必要 调查 的 事情 (与 IEEE 1008 一 致 ) 
Incident Logging 事件 日 志 记录 所 发 生 的 (例如 在 测试 过 程 中 ?事件 的 详细 情况 
站 事件 管理 识别 .调查 ,采取 行动 和 处 理事 件 的 过 程 。 该 过 程 包含 对 事 
件 进行 记录 ,分 类 并 辨识 其 带 来 的 影响 [IEEE 1044] 
ie 辅助 记录 事件 ,并 对 事件 进行 状态 跟踪 的 工具 。 这 种 工具 常 
Tool 事件 管理 工具 常 具有 面向 工作 流 的 特性 ,以 跟踪 和 控制 事件 的 资源 分 配 、 
更 正和 再 测试 ,并 提供 报表 。 参 见 Defect Management Tool 
报告 任何 需要 调查 的 事件 (如 在 测试 过 程 中 需要 调查 的 事 
人 本 件 ) 的 文档 (IEEE 829) 
一 种 开发 生命 周期 。 项 目 被 划分 为 一 系列 增 量 ,每 一 增 量 
人 都 交付 整个 项 目 需求 中 的 一 部 分 功能 。 需 求 按 优先 级 进行 
增 量 开发 模型 划分 ,并 按 优先 级 在 适当 的 增 量 中 交付 。 在 这 种 生命 周期 


Development Model 


模型 的 一 些 版 本 中 (但 不 是 全 部 ) ,每 个 子 项 目 均 遵 循 一 个 
“微型 的 V 模型”, 具有 自 有 的 设计 ,编码 和 测试 阶段 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
。 每 次 集成 并 测试 一 个 或 若干 组 件 /系统 ,直到 所 有 组 件 / 系 
Incremental Testing 增 量 测试 统 都 已 经 被 集成 或 测试 的 一 种 测试 
Independence 独立 职责 分 离 , 有 助 于 客观 地 进行 测试 (DO-178b) 
Infeasible Path 不 可 达 路 径 通过 任何 输入 都 无 法 执行 到 的 路 径 
Informal Review 非 正式 评审 一 种 不 基于 正式 (文档 化 ) 过 程 的 评审 
Input 输入 被 组 件 读 取 的 变量 (无 论 存储 于 组 件 之 内 还 是 之 外 ) 
Input Domain 输入 域 有 效 输 入 的 集合 。 参 见 Domain 
Input Value 输入 值 输入 的 一 个 实例 。 参 见 Input 
一 种 同 级 评审 ,通过 检查 文档 以 检测 缺陷 ,例如 不 符合 开发 
pati 审查 标准 ,不 符合 更 上 层 的 文档 等 。 这 是 最 正式 的 评审 技术 , 因 
此 总 是 基于 文档 化 的 过 程 [IEEE 610,IEEE 1028]。 参 见 
Peer Review 
Inspection Leader 审查 负责 人 参见 Moderator 
Inspector 检视 人 /审查 员 | 参见 Reviewer 
ntl 可 安装 性 软件 产品 在 指定 环境 下 进行 安装 的 性 能 (ISO 9126)。 参 
见 Portability 
Installability Testing 可 安装 性 测试 测试 软件 产品 可 安装 性 的 过 程 。 参 见 Portability Testing 
帮助 安装 人 员 完 成 安装 过 程 的 使 用 说 明 , 可 存放 在 任何 合 
Installation Guide 安装 指南 适 的 介质 上 。 可 能 是 操作 指南 ,详细 步骤 ,安装 向 导 或 任何 
其 他 类 似 的 过 程 描述 
帮助 安装 人 员 完 成 安装 过 程 的 软件 ,可 存放 在 任何 合适 的 
Installation Wizard 安装 向 导 介质 上 。 它 通常 会 运行 安装 过 程 ` 反 馈 安装 结果 ,并 提示 安 
装 选项 
et 探测 在 程序 中 插入 附加 代码 ,以 便 在 程序 执行 时 收集 其 执行 信 
息 。 例 如 ,用 于 度量 代码 覆盖 
Instrumenter 探测 工具 用 于 执行 探测 的 软件 工具 
Intake Test 预测 试 冒 烟 测试 的 一 种 特例 ,用 于 决定 组 件 / 系 统 是 否 能 够 进行 更 
深入 的 测试 。 通 常 在 测试 执行 的 初始 阶段 实施 
Integration 集成 把 组 件 /系统 合并 为 更 大 部 件 的 过 程 
一 种 旨 在 暴露 接口 以 及 集成 组 件 /系统 间 交 互 时 存在 的 缺 
Integration Testing 集成 测试 陷 的 测试 。 参见 Component Integration Testing, System 
Integration Testing 
Integration Testing In . . 
系统 集成 测试 参见 System Integration Testing 
The Large 
ei eam 组 件 集成 测试 ”| 参见 Component Integration Testing 
Interface Testing 接口 测试 一 种 集成 测试 类 型 ,注重 于 测试 组 件 /系统 之 间 的 接口 
a 软件 产品 与 一 个 或 多 个 指定 组 件 / 系 统 进行 交互 的 能 力 
ep 二 [ISO 9126]。 参 见 Functionality 
Interoperability Testing 。 | 互 操作 性 测试 0 产品 可 交互 性 的 测试 过 程 。 参见 Functionality 
Invalid Testing 无 效 性 测试 使 用 应 该 被 组 件 /系统 拒绝 的 输入 值 进行 的 测试 。 参 见 


Error Tolerance 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
和 将 组 件 与 其 周边 组 件 隔离 后 进行 的 测试 。 如 果 有 必要 ,使 
obo sb 人 用 桩 (Stubs) 或 驱动 器 (Drivers) 来 模拟 周边 程序 
Item Transmittal Report | 版 本 发 布 报告 参见 Release Note 
一 种 开发 生命 周期 。 项 目 被 划分 为 大 量 迭 代 过 程 。 一 次 迭 
Tterative 送 代 开发 模型 代 是 一 个 完整 的 开发 循环 ,并 (对 内 或 对 外 ) 发 布 一 个 可 执 
Development Model 行 的 产品 ,这 是 正在 开发 的 最 终 产 品 的 一 个 子 集 ,通过 不 断 
迭代 最 终 成 型 的 产品 
Key Performance Indicator | 关键 性 能 指标 参见 Performance Indicator 
一 种 脚本 编写 技术 ,所 使 用 的 数据 文件 不 单 包含 测试 数 
据 和 预期 结果 ,还 包含 与 被 测 程序 相关 的 关键 词 。 用 于 
K d Dri Testi 习 
word Driven Testing | 关键 字 吕 动 测试 | 测试 的 控制 脚本 通过 调用 特别 的 辅助 脚本 来 解释 这 些 关 
键 词 
线性 代码 序列 和 跳 转 (Linear Code Sequence And Jump) 。 
LCSAJ LCSAJ 包含 以 下 三 项 (通常 通过 源 代码 清单 的 行 号 来 识别 ) 可 执 
行 语句 的 线性 序列 的 开始 、 结 束 以 及 在 线性 序列 结尾 控制 
流 所 转移 到 的 目标 行 
测试 套件 所 检测 的 组 件 的 LCSAJ 百分比 。LCSAJ 达到 
PES Cage LCSAJ 覆 六 100% 意 味 着 决策 覆盖 (Decision Coverage) 为 100% 

LCSAJ Testing LCSAJ 测试 一 种 白 盒 测 试 设计 技术 ,其 测试 用 例 用 于 执行 LCSAJ 
encndbliy 易学 性 元件 产 呈 具有 胞 基于 用 户 尝 习 的 能 为 LISD 9126)。 参 
见 Usability 
Level Test Plan 级 别 测试 计划 sD et td dt 

Test Plan 
Link Testing 组 件 集成 测试 参见 Component Integration Testing 
一 种 通过 增加 负载 来 测量 组 件 或 系统 的 测试 方法 。 例 如 ， 
Load Testing 负载 测试 通过 增加 并 发 用 户 数 和 (或 ) 事 务 数量 来 测量 组 件 或 系统 能 
够 承受 的 负载 。 参 见 Stress Testing 
Logic-Coverage Testing 逻辑 覆盖 测试 参见 White Box Testing 
Logic-Driven Testing 逻辑 驱动 测试 参见 White Box Testing 
Logical Test Case we 由 1 参见 High Level Test Case 
具有 具体 的 (实现 级 别 Implementation Level) 输 入 数据 和 预 
期 结果 的 测试 用 例 。 抽 象 测试 用 例 中 所 使 用 的 逻辑 运算 符 
Tow Level Test Case | 详细 测试 用 全 | 被 着 换 为 对 应 于 带 辑 运算 符 作 用 的 实际 值 。 参 见 High 
Level Test Case 
Muint 维护 软件 产品 交付 后 对 其 进行 的 修改 ,以 修正 缺陷 ,改善 性 能 或 
ee 其 他 属性 ,或 者 使 其 适应 新 的 环境 (IEEE 1219) 
Maintenance Testing 维护 测试 a eg et ti 
Pe 软件 产品 是 否 易 于 更 改 , 以 便 修正 缺陷 、 满 足 新 的 需求 ,使 
We 国 和 以 后 的 维护 更 简单 或 者 适应 新 的 环境 (ISO 9126) 
Maintainability Testing 可 维护 性 测试 判定 软件 产品 的 可 维护 性 的 测试 过 程 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
由 管理 层 或 其 代表 执行 的 对 软件 采购 、 供 应 .开发 .运作 或 
Wat Reviey 管理 评审 维护 过 程 的 系统 化 评估 ,包括 监控 过 程 、 判 断 计 划 和 进度 表 
的 状态 .确定 需求 及 其 系统 资源 分 配 ,或 评估 管理 方式 的 效 
用 ,以 达到 正常 运作 的 目的 (IEEE 610,IEEE 1028) 
Master Test Plan 主 测试 计划 通常 针对 多 个 测试 级 别 的 测试 计划 。 参 见 Test Plan 
(1) 组 织 在 其 过 程 和 工作 实践 上 的 有 效 性 和 高 效 性 的 能 力 。 
i 成 熟 度 参见 Capability Maturity Model,Test Maturity Model。(2) 软 
De l 件 产品 在 存在 缺陷 的 情况 下 避免 失效 的 能 力 [ISO 9126]。 
参见 Reliability 
Measure 测量 测度 时 赋予 实体 某 个 属性 的 数值 或 类 别 (ISO 14598) 
给 实体 赋予 一 个 数值 或 类 别 以 描述 其 某 个 属性 的 过 程 (ISO 
Measurement 测度 14598) 
Measurement Scale 度量 标准 约束 数据 分 析 类 型 的 标准 
程序 的 动态 存储 分 配 逻辑 存在 的 缺陷 ,导致 内 存 使 用 完毕 
Memory Leak 内 存 泄漏 后 不 能 收回 而 不 可 用 ,最 终 导致 程序 因为 内 存 缺 乏 而 运行 
失败 (Fail) 
Metric 度量 测量 所 使 用 的 方法 或 者 度量 标准 (ISO 14598) 
Migration Testing 移植 测试 参见 Conversion Testing 
Milestone 里 程 碑 项 目 过 程 中 预定 义 的 (中 间 的 ) 交 付 物 和 结果 就 绪 的 时 间 点 
Mistake 错误 参见 Error 
Moderator 主持 人 负责 检视 或 其 他 评审 过 程 的 负责 人 或 主要 人 员 
Moditied Condition Decis- | 改进 的 条 件 判定 SC Dee 
ion Coverage 覆盖 
Modihed SemonDess | 其 夺 的 委 际 尖 突 参见 Condition Determination Coverage Testing 
ion Testing 测试 
a EE 
Me Muldpleeondie | 牙 过 的 复合 水 件 参见 Condition Determination Coverage 
ion Coverage 覆盖 
Modified Mulipie Condit | 下 进 的 保全 此 入 参见 Condition Determination Coverage Testing 
ion Testing 测试 
Module 模块 参见 Component 
Module Testing 模块 测试 参见 Component Testing 
与 被 测 组 件 / 系 统 同 时 运行 的 软件 工具 或 硬件 设备 ,对 组 
ee 监测 器 /监视 器 | 件 /系统 的 行为 进行 监视 .记录 和 分 析 (TEEE 610) 
Monitoring Tool el 参见 Monitor 
工具 
合 
Multiple Condition 网 二 条 件 / 多 三 | Conmpound Conditon 
Multiol 测试 套件 覆盖 的 一 条 语句 内 的 所 有 单条 件 结果 组 合 的 百 分 
ee 复合 条 件 覆 盖 ”| 比 。100% 复 合 条 件 覆 盖 意 味 着 100% 条 件 判定 覆盖 
Condition Coverage 人 
(Condition Determination Coverage) 
3 ST i 
Multiple 复合 条 件 测试 种 白 盒 测试 设计 技术 ,测试 用 例 用 来 覆盖 一 条 语句 中 的 


Condition Testing 


单条 件 所 有 可 能 的 结果 组 合 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
2 一 种 确定 测试 套件 完整 性 的 方法 , 即 判定 测试 套件 能 够 区 
Mutation Analysis 变异 分 析 分 程序 与 其 微 变 体 之 间 区 别 的 程度 
Mutation Testing 变异 测试 参见 Back-To-Back Testing 
N-Switch Coverage N 切换 覆盖 N 十 1 个 转换 的 序列 在 一 个 测试 套件 中 被 覆盖 的 百分比 
, 一 种 状态 转换 测试 的 形式 ,其 测试 用 例 执 行 N 十 1 个 转换 的 
ee Wiebe 所 有 有 效 序列 [Chow]。 参 见 State Transition Testing 
一 种 旨 在 表现 组 件 / 系 统 不 能 正常 工作 的 测试 。 逆 向 测试 
志 Tiesfig 逆向 测试 取决 于 测试 人 员 的 想法 ,态度 ,而 与 特定 的 测试 途径 或 测试 
设计 技术 无 关 , 例 如 使 用 无 效 输入 值 测试 或 在 异常 情况 下 
进行 测试 
Non-Conformity 不 一 致 没有 实现 指定 的 需求 (ISO 9000) 
ea 与 功能 性 无 关 , 但 与 可 靠 性 (Reliability)、 高 效 性 
和 人 非 功能 需求 。 | (Efficiency) ,可 用 性 (Usability) ,可 维护 性 (Maintainability) 
ee 和 可 移植 性 (Portability) 等 属性 相关 的 需求 
对 组 件 /系统 中 与 功能 性 无 关 的 属性 (例如 可 靠 性 、 高 效 性 、 
Non-Functional Testing 非 功能 测试 可 用 性 .可 维护 性 和 可 移植 性 ) 进 行 的 测试 
| 推导 或 选择 非 功 能 测试 所 需 测试 用 例 的 过 程 ,此 过 程 依据 
Te | 基于 对 组 件 /系统 的 规格 说 明 进 行 分 析 , 而 不 考虑 其 内 部 结构 。 
EE 参见 Black Box Test Design Technique 
面向 大 众 市 场 ( 即 大 量 用 户 ) 开 发 的 软件 产品 ,并 且 以 相同 
ff-The-Shore Sof 
oO e-Shore Software “| 现货 软件 的 形式 交付 给 许多 客户 
Operabiiler 可 操作 性 软件 产品 被 用 户 操作 或 控制 的 角力 (IS0 9126) 。 参 
见 Usability 
用 户 或 客户 现场 所 安装 的 硬件 和 软件 产品 ,被 测 组 件 /系统 
Operational Environment | 运行 环境 将 在 此 环境 下 使 用 。 软 件 可 能 包括 操作 系统 、 数 据 库 管 理 
系统 和 其 他 应 用 程序 
Operational 了 对 系统 运作 模型 (执行 短 周 期 任务 ) 及 其 典型 应 用 概率 的 统 
Profile Testing El 计 测 试 
ee 运行 测试 md 
Oracle 基准 参见 Test Oracle 
Outcome 结果 参见 Result 
Output 输出 组 件 填 写 的 一 个 变量 (无 论 存储 在 组 件 内 部 还 是 外 部 ) 
Output Domain 输出 域 可 从 中 选取 有 效 输出 值 的 集合 。 参 见 Domain 
Output Value 输出 值 输出 的 一 个 实例 / 实 值 。 参 见 Output 
一 种 软件 开发 方式 ,组 件 的 代码 (开发 和 /或 测试 ) 由 两 名 程 
Pair Programming 结对 编程 序 员 在 同一 台 计 算 机 上 共同 编写 。 这 意味 着 实时 地 执行 代 
码 评审 
两 个 人 员 ,比如 两 个 测试 人 员 一 个 开发 人 员 和 一 个 测试 人 
Pair Testing 结对 测试 员 ,或 一 个 最 终 用 户 和 一 个 测试 人 员 ,一 起 寻找 缺陷 。 一 般 
地 ,他 们 使 用 同一 台 计算 机 并 在 测试 期 间 交 蔡 操 控 
Partition Testing 划分 测试 参见 Equivalence Partitioning 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
如 果 一 个 测试 的 实际 结果 与 预期 结果 相符 , 则 认为 此 测试 
Pass 通过 通过 
mom 和 用 于 判定 测试 项 (功能 ) 或 特性 通过 或 失败 的 决策 规则 
Pass/Fail Criteria 通过 /失败 准则 CIEEE 829) 
组 件 / 系 统 从 人口 (Entry Point) 到 出 口 (Exit Point) 的 一 系 
i 列 事件 (例如 可 执行 语句 ) 
测试 套件 执行 的 路 径 所 占 的 百分比 。100% 的 路 径 覆 盖 意 
eg a 味 着 100% 的 线性 代码 序列 和 跳 转 CLCSAJ) 覆 关 
Path Sensitizing 路 径 感知 选择 一 组 输入 值 ,以 强制 执行 某 指定 路 径 
Path Testing 路 径 测试 一 种 白 盒 测试 设计 技术 ,设计 的 测试 用 例 用 于 执行 路 径 
由 研发 产品 的 同事 对 软件 产品 进行 的 评审 ,目的 在 于 识别 缺 
Peer Review 同行 评审 陷 并 改进 产品 。 例 如 审查 (Inspection) ,技术 评审 (Technical 
Review) 和 走 查 (Walkthrough) 
组 件 /系统 在 给 定 的 处 理 周期 和 吞吐 率 (Throughput Rate) 
了 Performance 性 能 等 约束 下 , 完成 指定 功能 的 程度 [IEEE 610]。 参 
见 Efficieney 
一 种 有 效 性 (Effectiveness) 或 高 效 性 (Efficiency) 的 高 级 ( 抽 
Performance Indicator 性 能 指标 象 ) 度 量 单位 ,用 于 指导 和 控制 开发 进展 。 例 如 ,软件 交付 
时 间 的 偏差 (Lead-Time Slip For Software Development) 
Performance Testing 性 能 测试 判定 软件 产品 性 能 的 测试 过 程 。 参 见 Efficiency Testing 
一 种 支持 性 能 测试 的 工具 ,通常 有 两 个 功能 : 负载 生成 
ee (Load Generation) 和 测试 事务 (Test Transition) 测量 。 负 
Testing Tool 性 能 测试 工具 载 生 成 可 以 模拟 多 用 户 或 者 大 量 输入 数据 。 执 行 时 ,对 选 
定 的 事务 的 响应 时 间 进 行 测量 并 被 记录 。 性 能 测试 工具 通 
常会 生成 基于 测试 日 志 的 报告 以 及 负载 一 响应 时 间 图 表 
Phase Test Plan 阶段 测试 计划 通常 用 于 一 个 测试 阶段 的 测试 计划 。 参 见 Test Plan 
Bortability 可 移植 性 ee i 
Portability Testing 可 移植 性 测试 判定 软件 产品 可 移植 性 的 测试 过 程 
Postcondition 后 置 条 件 执行 测试 或 测试 步骤 后 必须 满足 的 环境 和 状态 条 件 
ee 执行 后 比较 。 “| 实际 值 与 期 值 的 比较 ,在 软件 运行 结束 后 执行 
Comparison 
对 组 件 / 系 统 执行 特定 测试 或 测试 步骤 之 前 必须 满足 的 环 
Precondition 前 置 条 件 境 和 状态 条 件 
Predicted Outcome 预期 结果 参见 Expected Result 
Pretest 预测 试 参见 Intake Test 
Priority 优先 级 赋予 某 项 (业务 ) 重 要 性 的 级 别 , 如 缺陷 
在 测试 时 由 于 测试 工具 (例如 性 能 测试 工具 或 监测 器 ) 对 组 
Probe Effect 探测 影响 件 / 系 统 产生 的 影响 。 比 如 ,使 用 性 能 测试 工具 可 能 会 使 系 
统 的 性 能 有 小 幅度 降低 
Problem 问题 参见 Defect 
Problem Management 问题 管理 参见 Defect Management 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Problem Report 问题 报告 参见 Defect Report 
Process 过 程 一 组 将 输入 转变 为 输出 的 相关 活动 (ISO 12207) 
Biol 过 程 周期 测试 一 种 黑 盒 测试 设计 技术 ,设计 的 测试 用 例 用 于 执行 业务 流 
程 或 过 程 
Product Risk 产品 风险 与 测试 对 象 有 直接 关系 的 风险 。 参 见 Risk 
一 个 项 目 是 一 组 以 符合 特定 需求 为 目的 的 ,相互 协同 的 , 具 
Project 项 目 有 开始 和 结束 时 间 的 受 控 活动 。 这 些 特 定 需求 包括 限定 的 
周期 成 本 和 资源 (ISO 9000) 
Project Risk 项 目 风险 与 (测试 ) 项 目的 管理 与 控制 相关 的 风险 。 参 见 Risk 
Program Instrumenter 程序 插 装 器 参见 Instrumenter 
Program Testing 程序 测试 参见 Component Testing 
Project Test Plan 项 目测 试 计划 参见 Master Test Plan 
eid nd 伪 随 机 A 
ie 质量 组 件 、 系 统 或 过 程 满足 指定 需求 或 用 户 /客户 需要 及 期 望 的 
程度 (IEEE 610) 
ne 质量 保证 ee 
Quality Attribute 质量 属性 影响 某 项 质量 的 特性 或 特征 (IEEE 610) 
Quality Characteristic 质量 特征 参见 质量 属性 (Quality Attribute) 
在 质量 方面 指导 和 控制 一 个 组 织 的 协同 活动 。 通 常 包 括 建 
Quality Management 质量 管理 立 质量 策略 和 质量 目标 、 质 量 计划 、 质 量 控 制 \, 质 量 保证 和 
质量 改进 (ISO 9000) 
一 种 黑 盒 测试 设计 技术 ,选择 测试 用 例 以 匹配 某 种 运行 概 
Random Testing 随机 测试 貌 情况 (可 能 使 用 伪 随 机 生成 算法 )。 这 种 技术 可 用 于 测试 
非 功能 性 的 属性 ,比如 可 靠 性 和 性 能 
Recorder 记录 员 参见 Scribe 
Record/Playback Tool 录制 /回放 工具 | 参见 Capture/Playback Tool 
软件 产品 失效 (Failure) 后 ,重建 其 特定 性 能 级 别 以 及 恢复 
Be sas 数据 的 能 力 [ISO 9126]。 参 见 Reliability 
Recoverability Testing 可 恢复 性 测试 判定 软 件 产 品 可 恢复 性 的 测试 过 程 。 参 见 Reliability 
Testing 
Recovery Testing 恢复 测试 参见 Recoverability Testing 
测试 先前 测试 过 并 修改 过 的 程序 ,确保 更 改 没有 给 软件 其 
Regression Testing 回归 测试 他 未 改变 的 部 分 带 来 新 的 缺陷 (Defect)。 软 件 修 改 后 或 使 
用 环境 变更 后 要 执行 回归 测试 
Regulation Testing 规范 性 测试 参见 Compliance Testing 
标识 测试 项 、 测 试 项 配置 .目前 状态 及 其 他 交付 信息 的 文 
Release Note 发 布 说 明 档 ,这 些 交 付 信息 是 由 开发 .测试 和 可 能 的 其 他 风险 承担 者 
在 测试 执行 阶段 开始 的 时 候 提交 的 (ISO 9126) 
过 软件 产品 在 一 定 条 件 下 (规定 的 时 间或 操作 次 数 等 ) ,执行 
elsey tad 其 必须 的 功能 的 能 力 (1SO 9126) 
Reliability Testing 可 靠 性 测试 判定 软件 产品 可 靠 性 的 测试 过 程 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
性 在 相同 环境 下 ,软件 产品 取代 另 一 指定 软件 产品 以 达到 相 
Se 本本 作 同 目的 的 能 力 (ISO 9126)。 参 见 Portability 
系统 必须 满足 的 ,为 用 户 解 决 问题 或 达到 目的 ,条 件 或 者 能 
RE 需求 力 。 通 过 系统 或 者 系统 的 组 件 的 运行 以 满足 合同 ,标准 、 规 
格 或 其 他 指定 的 正式 文档 定义 的 要 求 (IEEE 610) 
人 根据 需求 推导 测试 目标 和 测试 条 件 以 设计 测试 用 例 的 方 
es es 基于 需求 的 测试 | 法 。 例 如 ,执行 特定 功能 的 测试 或 探测 诸如 可 靠 性 和 可 用 
性 等 非 功能 性 属性 的 测试 
一 种 支持 需求 记录 .需求 属性 (例如 优先 级 ) 和 注解 的 工具 ， 
eulierments 需求 管理 工具 。 | 能 够 通过 多 层次 需求 和 需求 变更 管理 达到 可 追踪 性 。 一 些 
Management Tool 需求 管理 工具 还 支持 静态 分 析 , 如 一 致 性 检查 以 及 预定 义 
的 需求 规则 之 间 的 冲突 
ICE 在 软件 生命 周期 中 定义 和 文档 化 软件 产品 需求 的 阶段 
(IEEE 610) 
软件 产品 在 规定 的 条 件 下 执行 其 功能 时 ,使 用 适当 数量 和 
类 型 资源 的 能 力 。 例 如 ,程序 使 用 的 主 存储 器 和 二 级 存储 
Meee ln 器 容量 ,需要 的 临时 或 溢出 文件 的 大 小 (ISO 9126)。 参 
见 Efficiency 
R Utilizati 
ete Pe 资源 使 用 测试 “| 判定 软件 产品 资源 使 用 的 测试 过 程 。 参 见 Efficiency Testing 
ee 冯 间 测试 执行 的 成 果 , 包 括 屏幕 输出 ,数据 更 改 、 报 告 和 发 出 的 
ee 通信 和 消息。 参见 Actual Result, Expected Result 
i 证 总 奖 风 在 重新 启动 被 中 断 ( 或 者 延迟 ) 的 测试 时 ,必须 重复 执行 的 
测试 活动 
Re Desi 再 测试 重新 执行 上 次 失败 的 测试 用 例 ,以 验证 纠 错 的 正确 性 
对 产品 或 产品 状态 进行 的 评估 ,以 确定 与 计划 的 结果 所 存 
在 的 误差 ,并 提供 改进 建议 。 例 如 ,管理 评审 (Management 
Review 评审 
Review) , 非 正式 评审 (Informal Review) ,技术 评审 (Technical 
Review) ,审查 (Inspection) 和 走 查 (Walkthrough) 
参与 评审 的 人 员 ,辨识 并 描述 被 评审 产品 或 项 目 中 的 异常 。 
Reviewer 评审 人 在 评审 过 程 中 ,可 以 选择 评审 人 员 从 不 同 角度 评审 或 担当 
不 同 角色 
对 评审 过 程 提供 支持 的 工具 。 典 型 的 功能 包括 计划 评审 、 
Review Tool 评审 工具 跟踪 管理 、 通 信 支 持 、 协 同 评审 以 及 对 具体 度量 (单位 ) 收 集 
与 报告 的 存储 库 
Risk 风险 将 会 导致 负面 结果 的 因素 。 通 常 表达 成 可 能 的 (负面 ) 影 响 
Risk Analysis 风险 分 析 评估 识别 出 的 风险 以 估计 其 影响 和 发 生 的 可 能 性 的 过 程 
Risk-Based Testing 基于 风险 的 测试 | 倾向 于 探索 和 提供 有 关 产 品 风险 信息 的 测试 
区 Ep 为 降低 风险 或 控制 风险 在 指定 级 别 而 达成 的 决议 和 实施 防 


范 ( 度 量 ) 措 施 的 过 程 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
使 用 技术 手段 (例如 头脑 风暴 (Brainstorming)、 检 验 表 
Risk Identification 风险 识别 (Checklists) 和 失败 历史 记录 (Failure History)) 标 识 风险 的 
过 程 
ele et 风险 管理 rt 
Risk Mitigation 风险 缓解 参见 Risk Control 
ss 健壮 性 在 出 现 无 效 输 入 或 压力 环境 条 件 下 ,组 件 / 系 统 能 够 正常 工 
作 的 程度 (IEEE 610) 。 参 见 Error Tolerance , Fault-Tolerance 
Robustness Testing 健壮 性 测试 判定 软件 产品 健壮 性 的 测试 
tee 根本 原因 bo 
六 区 安全 性 软件 产品 在 特定 的 使 用 环境 中 ,达到 对 人 、 业 务 、 软 件 、 财 产 
或 环境 可 接受 的 危害 风险 级 别 的 能 力 [ISO 9126] 
Safety Testing 安全 性 测试 判定 软件 产品 安全 性 的 测试 
Sanity Test 健全 测试 参见 冒 烟 测试 (Smoke Test) 
Scalability 可 扩展 性 软件 产品 可 被 升级 以 容纳 更 多 负载 的 能 力 
Scalability Testing 可 扩展 性 测试 判定 软件 产品 可 扩展 性 的 测试 
Scenario Testing 场景 测试 参见 用 例 测试 (Use Case Testing) 
在 评审 会 议 中 将 每 个 提 及 的 缺陷 和 任何 过 程 改进 建议 记录 
Scribe 记录 员 到 日 志 表 单 上 的 人 员 ,记录 员 要 确保 日 志 表 单 易于 阅读 和 
理解 
a 脚本 语言 一 种 用 于 编写 可 执行 测试 脚本 (这 些 脚 本 被 测试 执行 工具 
We 使 用 ,如 录制 /回放 工具 ) 的 编程 语言 
软件 产品 防止 对 程序 和 数据 未 授权 访问 (无 论 是 有 意 的 还 
Security 安全 性 是 无 意 的 ) 的 能 力 的 属性 (ISO 9126)。 参 见 功能 性 
(Functionality) 
Gointty Tosting 安全 性 测试 汪 定 款 促 广 品 安全 性 的 油 二 ,参见 功 间 任 出 斌 (Eastionwlty 
Testing) 
Security Testing Tool 安全 性 测试 工具 | 测试 安全 特性 和 脆弱 性 的 工具 
Security Tool 安全 性 工具 提高 运行 安全 性 的 工具 
Serviceability Testing 服务 能 力 测试 参见 维护 能 力 测试 (Maintainability Test) 
Snelty 严重 性 ee i et 
一 个 实际 或 抽象 系统 的 特定 行为 特征 由 另 一 个 系统 来 代表 
Simulation 模拟 
(ISO 2382/1) 
测试 时 所 使 用 的 设备 .计算 机 程序 或 者 系统 , 当 提 供 一 套 控 
Simulator 模拟 器 制 的 输入 集 时 它们 的 行为 或 运行 与 给 定 的 系统 相似 (IEEE 
610 DO178b) 。 参 见 模拟 器 (Simulator) 
Site Acceptance Testing “| 现场 验收 测试 用 户 / 客 户 在 他 们 现场 进行 的 验收 测试 ,以 判定 组 件 / 系 统 


是 否 符合 他 们 的 需求 和 业务 流程 ,通常 包括 软件 和 硬件 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
所 有 定义 的 /计划 的 测试 用 例 的 一 个 子 集 , 它 覆盖 组 件 / 系 
人 冒 烟 测试 统 的 主要 功能 ,以 确保 程序 的 绝 大 部 分 关键 功能 正常 工作 ， 
es 但 忽略 细节 部 分 。 每 日 构建 和 冒 烟 测试 是 业界 的 最 佳 实 
践 。 参 见 预 测试 (Intake Test) 
计算 机 程序 .过 程 和 可 能 与 计算 机 系统 运行 相关 的 文档 和 
Software 软件 数据 
Software Feature 软件 特性 参见 特性 (Feature) 
软件 产品 的 功能 和 特性 总 和 ,能 够 达到 规定 的 或 隐 含 的 需 
Software Quality 软件 质量 求 (ISO 9126) 
er ly 软件 质量 特性 | 参见 质量 属性 (Quality Attribute) 
Characteristic 
Software Test Incident 软件 测试 事件 参见 事件 (Incident) 
Software Test 软件 测试 事件 
it 报告 参见 事件 报告 (Incident Report) 
Sof Usabili 
Me nent In wory | 软件 可 用 性 度量 | 一 种 基于 调查 表 的 可 用 性 测试 技术 ,以 评估 组 件 /系统 的 可 
Cy 调查 表 用 性 ,如 用 户 满意 度 
Source Statement 源 语 句 参见 语句 (Statement) 
说 明 组 件 / 系 统 的 需求 ,设计 ,行为 或 其 他 特征 的 文档 ,常常 
Specification 规格 说 明 还 包括 判断 是 否 满足 这 些 条 款 的 方法 。 理 想 情况 下 ,文档 
是 以 全 面 . 精 确 、 可 验证 的 方式 进行 说 明 的 
on ed ER 参见 黑 盒 测试 (Black Box Testing) 
Testing 测试 
Specification-Based Test | 基于 规格 说 明 的 i g 
Design Technique 测试 设计 技术 参见 黑 盒 测试 设计 技术 (Black Box Test Design Technique) 
Specified Input 特定 的 输入 在 规格 说 明 中 预测 结果 的 输入 
Stabilit 稳定 性 软件 产品 避免 因 更 改 后 导致 非 预期 结果 的 能 力 (ISO9126) 。 
dt 参见 可 维护 性 (Maintainability) 
Standard Software 标准 软件 参见 现货 软件 (Off-The-Shelf Software) 
Standards Testing 标准 测试 参见 一 致 性 测试 (Compliance Testing) 
ate eid 状态 图 一 种 图 表 , 描 绘 组 件 /系统 所 能 呈现 的 状态 ,并 显示 导致 或 
产生 从 一 个 状态 转变 到 另 一 个 状态 的 事件 或 环境 
一 示 每 个 状 3 
5 二 状态 表 种 表格 ,显示 每 个 状态 的 有 效 和 无 效 的 转换 及 可 能 的 伴 
随 事件 
State Transition 状态 转换 组 件 /系统 的 两 个 状态 之 间 的 转换 
Ss 一 种 黑 盒 测试 设计 技术 ,所 设计 的 测试 用 例 用 来 执行 有 效 
State Transition Testing ”| 状态 转换 测试 和 无 效 的 状态 转换 。 参 见 N- 切 换 测试 (N-Switch Testing) 
Statement 语句 编程 语言 的 一 个 实体 ,一 般 是 最 小 的 ,不 可 分 割 的 执行 单元 
Statement Coverage 语句 覆盖 由 测试 套件 运行 的 可 执行 语句 的 百分比 
Statement Testing 语句 测试 一 种 白 盒 测 试 设计 技术 ,所 设计 的 测试 用 例 用 来 执行 语句 
Static Analysis 静态 分 析 分 析 软 件 工件 (如 需求 或 代码 ) ,而 不 执行 这 些 工 作 产品 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Static Analysis Tool 静态 分 析 工 具 参见 静态 分 析 器 (Static Analyzer) 
Static Analyzer 静态 分 析 器 执行 静态 分 析 的 工具 
Static Code Analysis 静态 代码 分 析 分 析 软 件 的 源 代码 而 不 执行 软件 
: 执行 静态 代码 分 析 的 工具 。 工 具 对 源 代码 的 一 些 特性 进行 
Static Code Analyzer | 前 态 代码 分 析 串 | 和 可 ,例如 ,对 编码 规范 的 遵循 .质量 度量 或 数据 流 异常 等 
对 组 件 / 系 统 进行 规格 或 实现 级 别 的 测试 ,而 不 是 执行 这 个 
Static Testing 静态 测试 软件 。 比 如 ,代码 评审 或 静态 代码 分 析 
用 输入 的 统计 分 布 模型 来 构造 有 代表 性 的 测试 用 例 的 一 种 
Statistical Testing 统计 测试 测试 设计 技术 。 参 见 运行 概貌 测试 (Operational Profile 
Testing) 
配置 管理 的 一 个 要 素 , 包 括 记录 和 报告 有 效 地 管理 配置 所 
Status Accounting 状态 记录 需 的 信息 。 这 些 信 息 包括 被 认可 的 配置 标识 的 列表 ,提议 
的 配置 变更 的 状态 和 被 认可 的 变更 的 实施 状态 [IEEE 610] 
Storage 存储 参见 资源 利用 (Resource Utilization) 
Storage Testing 存储 测试 参见 资源 利用 测试 (Resource Utilization Testing) 
i 在 规定 的 或 超过 规定 的 需求 条 件 下 测试 组 件 / 系 统 ,以 对 其 
ee Ed 进行 评估 (IEEE 610)。 参 见 Load Testing 
sn 基于 结构 的 技术 | 参见 白 仗 测 试 设计 技术 (White Box Test Design Technique) 
Based Techniques 
Structural Coverage 结构 覆盖 基于 组 件 / 系 统 内 部 结构 的 覆盖 度量 
et Test Design | 结构 测试 设计 参见 白 盒 测试 设计 技术 (White Box Test Design Technique) 
Technique 技术 
Structural Testing 结构 测试 参见 白 盒 测试 (White Box Testing) 
Structured Walkthrough | 结构 走 查 参见 走 查 (Walkthrough) 
一 个 软件 组 件 框架 的 实现 或 特殊 目的 实现 ,用 于 开发 和 测 
Stub 桩 试 另 一 个 调用 或 依赖 于 该 组 件 的 组 件 。 它 代替 了 被 调用 的 
组 件 (IEEE 610) 
Subpath 子路 径 组 件 中 的 可 执行 语句 序列 
Suitability 适用 性 软件 产品 为 特定 任务 和 用 户 目标 提供 一 套 合适 功能 的 能 力 
(ISO 9126) 。 参 见 功能 性 (Functionality) 
Suspension Criteria 暂停 准则 eal nd li di a 
Sti entiiig 语法 测试 a rt a 以 输入 域 和 
Sete 系统 组 织 在 一 起 实现 一 个 特定 功能 或 一 组 功能 的 一 套 组 件 
(IEEE 610) 
System 测试 系统 和 包 的 集成 ,测试 与 外 部 组 织 ( 如 电子 数据 交换 、 
Integration Testing 亲信 集成 测试 国际 互联 网 ) 的 接口 
System Testing 系统 测试 测试 集成 系统 以 验证 它 是 否 满足 指定 需求 的 过 程 
一 种 同行 间 的 小 组 讨论 活动 ,主要 是 为 了 对 所 采用 的 技术 
Technical Review 技术 评审 实现 方法 达成 共识 (Gilb 和 Graham,IEEE 1028)。 参 见 同 
行 评审 (Peer Review) 
Test 测试 一 个 或 更 多 测试 用 例 的 集合 (IEEE 829) 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
针对 特定 项 目的 测试 策略 的 实现 ,通常 包括 根据 测试 项 目 
Test Approach 测试 方法 的 目标 和 风险 进行 评估 之 后 所 做 的 决策 ,测试 过 程 的 起 点 、 
采用 的 测试 设计 技术 、 退 出 准则 和 所 执行 的 测试 类 型 
应 用 软件 来 执行 或 支持 测试 活动 ,如 测试 管理 ,测试 设计 、 
Test Automation 测试 自动 化 测试 执行 和 结果 检验 
能 够 从 中 推断 出 组 件 /系统 需求 的 所 有 文档 。 测 试用 例 是 
Test Basis 测试 依据 基于 这 些 文档 的 。 只 能 通过 正式 的 修正 过 程 来 修正 的 文档 
称 为 固定 测试 依据 
Test Bed 测试 台 参见 测试 环境 (Test Environment) 
为 特定 目标 或 测试 条 件 ( 例 如 执行 特定 的 程序 路 径 , 或 是 验 
Test Case 测试 用 例 证 与 特定 需求 的 一 致 性 ) 而 制定 的 一 组 输入 值 . 执 行人 口 条 
件 、 预 期 结果 和 执行 出 口 条 件 (IEEE 610) 
Ee 调试 用 便 设 计 | 参见 测试 设计 技术 (Test Design Technique) 
Technique 技术 
二 测试 用 例 规格 | 为 测试 项 指定 一 套 测试 用 例 (目标 、 输 入、 测试 动作 、 期 望 结 
说 明 果 、 执 行 预 置 条 件 ) 的 文档 (IEEE 829) 
Test Case Suite 测试 用 例 集 参见 测试 套 (Test Suite) 
对 测试 目标 的 陈述 ,还 可 能 包括 关于 如 何 进 行 测试 的 测试 
Test Charter 测试 章程 思路 。 测 试 章程 通常 用 在 探索 测试 中 。 参 见 探 索 测 试 
(Exploratory Testing) 
从 已 完成 的 测试 活动 中 收集 数据 ,总 结 基 于 测试 件 及 相关 
Test Closure 测试 结束 事实 和 数据 的 测试 结束 阶段 ,包括 对 测试 件 的 最 终 处 理 和 
归档 ,以 及 测试 过 程 评估 (包含 测试 评估 报告 的 准备 )。 参 
见 测试 过 程 (Test Process) 
Test Comparator 测试 比较 器 执行 自动 测试 比较 的 测试 工具 
区 分 被 测 组 件 /系统 产生 的 实际 结果 和 期 望 结果 的 差异 的 
Test Comparison 测试 对 比 过 程 。 测 试 对 比 可 以 在 测试 执行 时 进行 (动态 比较 ) ,或 在 
测试 执行 之 后 进行 
Test Completion Criteria | 测试 完成 准则 参见 退出 准则 (Exit Criteria) 
二 组 件 / 系 统 中 能 被 一 个 或 多 个 测试 用 例 验证 的 条 目 或 事件 。 
ee 例如 功能 ,事务 ,特性 ,质量 属性 或 者 结构 化 元 素 
当 监 测 到 与 预期 情况 背离 时 ,制定 和 应 用 一 组 修正 动作 以 
Test Control 测试 控制 使 测试 项 目 保持 正常 进行 的 测试 管理 工作 。 参 见 测 试管 理 
(Test Management) 
Test Coverage 测试 覆盖 参见 覆盖 (Coverage) 
Test Cycle 测试 周期 针对 一 个 可 分 辨 的 测试 对 象 发 布 版 本 而 执行 的 测试 过 程 
在 测试 执行 之 前 存在 的 数据 (如 在 数据 库 中 ) ,这 些 数 据 与 
0 被 测 组 件 /系统 相互 影响 
Test Data 测试 数据 准备 | 一 种 测试 工具 ,用 于 从 已 存在 的 数据 库 中 挑选 数据 ,或 创 
Preparation Tool 工具 建 , 生 成 .操作 和 编辑 数据 以 备 测试 
Test Design 测试 设计 参见 测试 设计 规格 说 明 (Test Design Specification) 
et en pe 测试 设计 规格 | 为 一 个 测试 条 目 指定 测试 条 件 ( 覆 盖 项 )、 具 体 测试 方法 并 
说 明 识别 相关 高 层 测试 用 例 的 文档 


续 表 
英文 术语 中 文 术 语 对 应 的 说 明 
Test Design Technique 测试 设计 技术 用 来 衍生 和 /或 选择 测试 用 例 的 步骤 
通过 生成 测试 输入 来 支持 测试 设计 的 工具 。 测 试 输入 可 能 
Test Design Tool 测试 设计 工具 来 源 于 CASE 工具 库 ( 如 需求 管理 工具 ) 中 包含 的 规格 , 工 
具 本 身 包含 的 特定 测试 条 件 
Test Driver 测试 驱动 器 参见 驱动 器 (Driver) 
在 开发 软件 之 后 ,运行 测试 用 例 之 前 ,首先 开发 并 自动 化 这 
Test Driven Development | 测试 驱动 开发 此 测试 用 例 的 一 种 软件 开发 方法 
E 执行 测试 需要 的 环境 ,包括 硬件 、 仪 器 模拟 器 .软件 工具 和 
Test Environment 测试 环境 其 他 支持 要 素 
在 测试 过 程 的 结尾 用 来 总 结 所 有 的 测试 活动 和 结果 的 文 
。 
Test Evaluation Report 测试 评估 报告 档 。 也 包括 测试 过 程 的 评估 和 吸取 的 教训 
Test Execution 测试 执行 对 被 测 组 件 /系统 执行 测试 ,产生 实际 结果 的 过 程 
二 使 用 软件 (例如 捕捉 /回放 工具 ) 来 控制 测试 的 执行 .实际 结 
证 测试 执行 自动 化 | 果 和 期 望 结 果 的 对 比 、 测 试 预 置 条 件 的 设置 和 其 他 的 测试 
xecution Automation 控制 和 报告 功能 
区 软件 开发 生命 周期 的 一 个 阶段 ,在 这 个 阶段 里 执行 软件 产 
Test Execution Phase 测试 执行 阶段 品 的 组 件 , 并 评估 软件 产品 以 确定 是 否 满足 需求 
测试 过 程 的 执行 计划 。 这 些 测 试 过 程 包含 在 测试 执行 时 间 
Test Execution Schedule | 测试 执行 时 间 表 表 中 ,执行 时 间 表 列 出 了 执行 任务 间 的 关联 和 执行 的 顺序 
T 
en | 测试 执行 技术 | 用 来 执行 实际 测试 的 方法 ,包括 手工 的 和 自动 的 
Execution Technique 
et 测试 执行 工具 使 用 自动 化 测试 脚本 执行 其 他 软件 (如 捕 提 /回放 ) 的 一 种 
测试 工具 。 
Test Fail 测试 失败 参见 失败 (FaiD) 
Test Generator 测试 产生 器 参见 测试 数据 准备 工具 (Test Data Preparation Tool) 
Test Harness 测试 用 具 包含 执行 测试 需要 的 柱 和 驱动 的 测试 环境 
Test Incident 测试 事件 参见 事件 (Incident) 
Test Incident Report 测试 事件 报告 参见 事件 报告 (Incident Report) 
2 执行 测试 所 需 的 组 成 物件 ,包括 测试 环境 ,测试 工具 办 公 
Test Infrastructure 测试 基础 设施 环境 和 过 程 
在 测试 执行 过 程 中 ,测试 对 象 从 外 部 源 接收 到 的 数据 。 外 
ee 站 部 源 可 以 是 硬件 .软件 或 人 
Test Ttem 测试 项 需 被 测试 的 单个 要 素 。 通 常 是 一 个 测试 对 象 包含 多 个 测试 
项 。 参 见 测试 对 象 (Test Object) 
Test Item Transmital 测试 项 移交 报告 | 参见 发 布 说 明 (Release Note) 
Report 
Test Leader 测试 组 长 参见 测试 经 理 (Test Manager) 
统一 组 织 和 管理 的 一 组 测试 活动 。 测 试 级 别 与 项 目的 职责 
Test Level 测试 级 别 相关 联 。 例 如 ,测试 级 别 有 组 件 测试 、 集 成 测试 、 系 统 测 试 
和 验收 测试 
Test Log 测试 日 志 按时 间 顺 序 排列 的 有 关 测 试 执行 所 有 相关 细节 的 记录 
Test Logging 测试 记录 把 测试 执行 信息 写 进 日 志 的 过 程 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
负责 测试 和 评估 测试 对 象 的 人 。 他 (她 ) 指 导 、 控 制 , 管 理 测 
We 和 试 计划 及 调整 对 测试 对 象 的 评估 
Test Management 测试 管理 计划 估计、 监控 和 控制 测试 活动 ,通常 由 测试 经 理 来 执行 
对 测试 过 程 中 的 测试 管理 和 控制 部 分 提供 支持 的 工具 。 它 
Test Management Tool 测试 管理 工具 通常 有 如 下 功能 : 测试 件 的 管理 测试 计划 的 制定 、 结 果 记 
录 、 过 程 跟踪 、 事 件 管理 和 测试 报告 
Test Maturity Model 测试 过 程 改 进 的 五 级 阶段 框架 , 它 与 能 力 成 熟 度 模型 
(TMM) 测 斌 成熟 度 模型 (CM) 相关 ,后 者 描述 了 有 效 测试 过 程 的 关键 要 素 
处 理 与 定时 检查 测试 项 目 状态 等 活动 相关 的 测试 管理 工 
Test Monitoring 测试 监控 作 。 准 备 测试 报告 来 比较 实际 结果 和 期 望 结果 。 参 见 测 试 
管理 (Test Management) 
Test Object 测试 对 象 需要 测试 的 组 件 或 系统 。 参 见 测 试 项 (Test Item) 
Test Objective 测试 目标 设计 和 执行 测试 的 原因 或 目的 
在 测试 时 确定 预期 结果 与 实际 结果 进行 比较 的 源 。 一 个 准 
Test Oracle 测试 准则 则 可 能 是 现 有 的 系统 (用 作 基 准 ) ,一 份 用 户 手 册 , 或 者 是 个 
人 的 专业 知识 ,但 不 可 以 是 代码 (Adrion) 
Test Outcome 测试 结果 参见 结果 (Result) 
Test Pass 测试 通过 参见 通过 (Pass) 
Test 测试 绩效 指标 一 种 高 级 别 的 度量 ,表明 需要 满足 的 某 种 程度 的 目标 值 或 
Performance Indicator 准则 。 通 常 与 过 程 改 进 的 目标 相关 。 例 如 缺陷 探测 率 
组 成 项 目的 一 个 可 管理 阶段 的 一 组 独特 的 测试 活动 。 例 
se NS 如 , 某 测 试 级 别 的 执行 活动 (Gerrard) 
描述 预期 测试 活动 的 范围 方法 、 资 源 和 进度 的 文档 。 它 标 
识 了 测试 项 、 需 测试 的 特性 ,测试 任务 、 任 务 负责 人 、 测 试 人 
Test Plan 测试 计划 员 的 独立 程度 、 测 试 环境 、 测 试 设计 技术 、 测 试 的 进入 和 退 
出 准则 及 选择 的 合理 性 .需要 紧急 预案 的 风险 ,是 测试 策划 
过 程 的 一 份 记 录 (IEEE 829) 
Test Planning 测试 策划 制定 或 更 新 测试 计划 的 活动 
Test Policy 测试 方针 描述 有 关 组 织 测试 的 原则 、 方 法 和 主要 目标 的 高 级 文档 
A AS | 测试 点 分 析 。 | 基于 功能 点 分 析 的 一 种 公式 化 测试 信 计 方法 
Test Procedure 测试 规程 参见 测试 规程 规范 (Test Procedure Specification) 
Test 测试 规程 规格 | 规定 了 执行 测试 的 一 系列 行为 的 文档 。 也 称 为 测试 脚本 或 
Procedure Specification 说 明 手工 测试 脚本 [IEEE 829] 
基本 的 测试 过 程 包 括 计 划 规约、 执行. 记录 、 检 查 完 全 性 和 
Test Process 测试 过 程 测试 结束 活动 
Test Process 用 于 测试 过 程 改 进 的 一 个 连续 框架 ,描述 了 有 效 测试 过 程 
Lipiorenent ETPD 测试 过 程 改进 | 的 关键 要 素 , 特 别针 对 于 系统 测试 和 验收 测试 
Test Record 测试 记录 参见 测试 日 志 (Test Log) 
Test Recording 书写 测试 记录 参见 测试 日 志 (Test Logging) 
i 测试 重复 性 一 个 测试 的 属性 ,表明 每 次 执行 一 个 测试 时 是 否 产生 同样 


的 结果 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
Test Report 测试 报告 参见 测试 总 结 报告 (Test Summary Report) 
Test Requirement 测试 需求 参见 测试 条 件 (Test Condition) 
Test Run 测试 运行 对 测试 对 象 的 特定 版 本 执行 测试 
Test Run Log 测试 运行 日 志 参见 测试 日 志 (Test Log) 
Test Result 测试 结果 参见 结果 (Result) 
Test Scenario 测试 场景 参见 测试 规程 规约 (Test Procedure Specification) 
Test Script 测试 脚本 通常 指 测试 规程 规约 ,尤其 是 自动 化 的 
Test Set 测试 集 参见 测试 套件 (Test Suite) 
Test Situation 测试 状况 参见 测试 条 件 (Test Condition) 
Test Specification 测试 规约 说 明 人 
ee 刘斌 规约 说 明 | 参见 测试 设计 技术 (Test Design Techniaue) 
Technique 技术 
Test Stage 测试 阶段 参见 测试 级 别 (Test Level) 
一 个 高 级 文档 ,该 文档 定义 了 需要 对 程序 (一 个 或 多 个 项 
ee 目 ) 执 行 的 测试 级 别 和 需要 进行 的 测试 
用 于 被 测 组 件 /系统 的 一 组 测试 用 例 。 在 这 些 测试 用 例 中 ， 
Wi 2 一 个 测试 的 出 口 条 件 通常 用 作 下 一 个 测试 的 人 口 条 件 
总 结 测试 活动 和 结果 的 文档 。 也 包括 对 测试 项 是 否 符合 退 
让 
Test Summary Report 测试 总 结 报告 出 准则 进行 的 评估 
Test Target 测试 目标 参见 退出 准则 (Exit Criteria) 
Test Technique 测试 技术 参见 测试 设计 技术 (Test Design Technique) 
支持 一 个 或 多 个 测试 活动 (例如 ,计划 和 控制 .规格 制定 、 建 
Test Tool 测试 工具 立 初始 文件 和 数据 ,测试 执行 和 测试 分 析 ) 的 软件 产品 。 参 
见 CAST 
旨 在 针对 特定 测试 目标 ,测试 组 件 /系统 的 一 组 测试 活动 。 
Test Type 测试 类 型 例如 ,功能 测试 . 易 用 性 测试 .回归 测试 等 。 一 个 测试 类 型 
可 能 发 生 在 一 个 或 多 个 测试 级 别 或 测试 阶段 上 
Testability 可 测试 性 软 种 站 六 眉 改 后 福 淹 试 的 能 为 (0150 9126)。 参 见 可 维护 性 
(Maintainability) 
a 2 2 详细 检查 测试 依据 ,以 判定 测试 依据 在 测试 过 程 中 作为 输 
Testability Review 可 测试 性 评审 入 文档 是 否 达到 质量 要 求 
对 需求 的 一 种 程度 说 明 , 表 示 是 可 依据 需求 进行 测试 设计 
Testable Requirements 可 测 的 需求 (以 及 后 续 的 测试 用 例 ) 和 执行 测试 ,以 及 判断 是 否 满足 需 
求 (IEEE 610) 
Tester 测试 员 参与 测试 组 件 /系统 的 专业 技术 人 员 
包括 了 所 有 生命 周期 活动 的 过 程 , 有 静态 的 ,也 有 动态 的 。 
3 涉及 计划 、 准 备 和 对 软件 及 其 相关 工作 产品 的 评估 ,以 发 现 
Testing 测试 


缺陷 来 判定 软件 或 软件 的 工作 产品 是 否 满足 特定 需求 ,证 
明 它们 是 否 符合 目标 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 
在 测试 过 程 中 产生 的 测试 计划 测试 设计 和 执行 测试 所 需 
RS 测试 件 要 的 人 工 制 品 。 例 如 ,文档 脚本、 输入 预期 结果 、 安 装 和 
清理 步骤 文件 数据库、 环境 和 任何 在 测试 中 使 用 的 软件 
和 工具 (Fewster 和 Graham) 
组 件 集成 测试 的 一 个 版 本 ,其 中 组 件 的 渐进 式 集成 遵循 需 
Ts 2 求 子 集 的 实现 ,与 按 层次 的 组 件 集 成 相反 
Time Behavior 时 间 行 为 参见 性 能 (Performance) 
集成 测试 的 一 种 递增 实现 方式 ,首先 测试 最 顶层 的 组 件 , 其 
他 组 件 使 用 桩 来 模拟 ,然后 已 被 测试 过 的 组 件 用 于 测试 更 
RW ME 自 机 向 下 测试 | 低层 的 组 件 ,直到 最 底层 的 组 件 被 测试 。 参 见 集成 测试 
(Integration Testing) 
识别 文档 和 软件 中 相关 联 条 目的 能 力 。 例 如 ,需求 与 相关 
Traceability 可 追溯 性 测试 关联 。 参 见 水 平 可 跟踪 性 (Horizontal Traceability) , 垂 
直 可 跟踪 性 (Vertical Traceability) 
软件 产品 对 于 用 户 是 否 易于 理解 .软件 是 否 适用 、 怎 样 应 用 
Understandability 可 理解 性 于 特定 任务 和 应 用 的 条 件 的 能 力 
Unit 单元 参见 组 件 (Component) 
Unit Testing 单元 测试 参见 组 件 测试 (Component Testing) 
Unreachable Code 不 可 达 代 码 不 能 够 到 达 , 因 而 不 可 能 被 执行 的 代码 
Usability 可 用 性 软件 能 被 理解 ,学习 、 使 用 和 在 特定 应 用 条 件 下 吸引 用 户 的 
能 力 (ISO 9126) 
用 来 判定 软件 产品 的 可 被 理解 .易学 、 易 操作 和 在 特定 条 件 
Usability Testing 可 用 性 测试 下 吸引 用 户 程度 的 测试 
用 户 和 系统 进行 对 话 过 程 中 的 一 系列 交互 ,能 够 产生 实际 
Use Case 用 例 的 结果 
else estilo 用 例 测试 te A dd stl 
User Acceptance Testing | 用 户 验收 测试 参见 验收 测试 (Acceptance Testing) 
User Scenario Testing 用 户 场景 测试 参见 用 例 测试 (Use Case Testing) 
User Test 用 户 测 试 由 真实 用 户 参 与 的 评估 组 件 / 系 统 可 用 性 的 测试 
描述 从 需求 定义 到 维护 的 整个 软件 开发 生命 周期 活动 的 框 
V-Model V 模型 架 。V 模型 说 明了 测试 活动 如 何 集成 于 软件 开发 生命 周期 
的 每 个 阶段 
Validation 确认 通过 检查 和 提供 客观 证 据 来 证 实 特定 目的 功能 或 应 用 已 经 
实现 (ISO 9000) 
Variable 变量 计算 机 中 的 存储 元 素 , 软 件 程序 通过 其 名 称 来 引用 
i 2 通过 检查 和 提供 客观 证 据 来 证 实 指定 的 需求 是 否 已 经 满足 
Verification 验证 
(ISO 9000) 
Vertical Traceability 垂直 可 跟踪 性 贯穿 开发 文档 到 组 件 层次 的 需求 跟踪 
Version Control 版 本 控制 参见 配置 控制 (Configuration Control) 
Volume Testing 容量 测试 使 用 大 容量 数据 对 系统 进行 的 一 种 测试 。 参 见 资源 利用 测 


试 (Resource-Utilization Testing) 


续 表 
英文 术语 中 文 术语 对 应 的 说 明 

由 文档 作者 逐步 陈述 文档 内 容 , 以 收集 信息 并 对 内 容 达 成 
Walkthrough 走 查 共识 [Freedman 和 Weinberg,IEEE 1028]。 参 见 同 行 评审 

(Peer Review) 
White-Box Test Design 白 盒 测试 设计 | 通过 分 析 组 件 /系统 的 内 部 结构 来 产生 或 选择 测试 用 例 的 
Technique 技术 规程 
White-Box Testing 白 盒 测试 通过 分 析 组 件 /系统 的 内 部 结构 进行 的 测试 
Wide Band Delphi 宽带 德尔 非法 一 种 专家 测试 评估 的 方法 , 旨 在 集团 队 成 员 的 智慧 来 做 精 


确 的 评估 


参考 文献 


曲 朝阳 , 刘 志 颖 等 著 . 软件 测试 技术 . 北京 : 中 国 水 利 电力 出 版 社 ,2006. 
柳 纯 录 , 黄 子 河 , 陈 党 萍 等 著 . 软件 评测 师 教程 . 北京 : 清华 大 学 出 版 社 ,2004. 
( 美 )Paul C. Jorgensen 著 . 软件 测试 . 2 版 . 杜 旭 涛 , 译 .北京 : 机 械 工 业 出 版 社 ,2005. 
( 美 ) Bort Broekman Edwin Notenboom 著 . 嵌入 式 软件 测试 . 张 君 施 ,等 译 . 北京 : 电子 工业 出 版 
社 ,2004. 
( 美 )Willian E. Perry 著 . 软件 测试 的 有 效 方法 . 兰 雨 晴 , 等 译 . 北京: 机械 工业 出 版 社 ,2004. 
( 美 )Mark Fewster&Dorothy Graham 著 . 软件 测试 自动 化 技术 与 实例 详解 . 舒 智勇 ,等 译 . 北京 : 电子 工 
业 出 版 社 ,2000. 
http://www. uml. org. cn. 
http://51testing. com. 
http://www. ltesting. net. 
http://www. cstqb. cn/file. aspx. 
http://task. hudong. com/ moregooddoc. wiki? missioniden= xRwBRCUcEWI5AbFFH. 
http://www. ibm. com/ developerworks/cn/rational/r-liangy. 
http://www. ltesting. net/html/15/category-catid-115. html. 
http://www. webspherechina. net/? uid-275-action-viewspace-itemid -3103. 
http://www. csai. cn. 
http://www. chillarege. com. 
http://www. testage. net/html/index. html. 
http://www. spasvo. com. 
http://bdonline. sqe. com. 
http://tech. groups. yahoo. com/group/LoadRunner. 
http://asq. org. 
http://www. automated-testing. com. 
http://www. betasoft. com. 
http://pleuma. cc. gatech. edu/aristotle. 
http://www. io. com/ ~ wazmo/qa. 
http://kaner. com. 
http://search. library. cmu. edu/client/ default. 
http://www. loadtester. com. 


21 世纪 高 等 学 校 数字 媒体 专业 规划 教材 


ISBN 书 名 定价 (元 ) 
9787302224877 数字 动画 编导 制作 29. 50 
9787302222651 数字 图 像 处 理 技术 35. 00 
9787302218562 动态 网 页 设计 与 制作 35. 00 
9787302222644 J2ME 手机 游戏 开发 技术 与 实践 36. 00 
9787302217343 Flash 多 媒体 课件 制作 教程 29. 50 
9787302208037 Photoshop CS4 中 文 版 上 机 必 做 练习 99. 00 
9787302210399 数字 音 视频 资源 的 设计 与 制作 25. 00 
9787302201076 Flash 动画 设计 与 制作 29. 50 
9787302174530 网 页 设计 与 制作 29. 50 
9787302185406 网 页 设计 与 制作 实践 教程 35. 00 
9787302180319 非 线性 编辑 原理 与 技术 25. 00 
9787302168119 数字 媒体 技术 导论 32. 00 
9787302155188 多 媒体 技术 与 应 用 25. 00 


以 上 教材 样 书 可 以 免费 赠送 给 授课 教师 ,如 果 需 要 ,请 发 电子 邮件 与 我 们 联系 。 


教学 资源 支持 


敬爱 的 教师 : 

感谢 您 一 直 以 来 对 清华 版 计算 机 教材 的 支持 和 爱护 。 为 了 配合 本 课程 的 教学 需要 ,本 教 
材 配 有 配套 的 电子 教案 (素材 ) ,有 需求 的 教师 可 以 与 我 们 联系 ,我 们 将 向 使 用 本 教材 进行 教学 
的 教师 免费 赠送 电子 教案 (素材 ) ,希望 有 助 于 教学 活动 的 开展 。 

相关 信息 请 拨打 电话 010-62776969 或 发 送 电子 邮件 至 weijj@tup. tsinghua. edu. cn 咨 
询 ,也 可 以 到 清华 大 学 出 版 社 主 页 (http://www. tup. com. cn 或 http://www. tup. tsinghua. 
edu. cn) 上 查询 和 下 载 。 

如 果 和 您 在 使 用 本 教材 的 过 程 中 遇 到 了 什么 问题 ,或 者 有 相关 教材 出 版 计划 ,也 请 您 发 邮件 
或 来 信 告 诉 我 们 ,以 便 我 们 更 好 地 为 您 服务 。 

地 址 : 北京 市 海淀 区 双 清 路 学 研 大 厦 A 座 708 计算 机 与 信息 分 社 魏 江 江 收 

邮编 : 100084 电子 邮件 : weijj@tup. tsinghua. edu. cn 

电话 : 010-62770175-4604 邮购 电话 : 010-62786544 


《网 页 设计 与 制作 (第 2 版 ) 》 目 录 
ISBN 978-7-302-25413-3 梁 芳 主编 


图 书简 介 : 

Dreamweaver CS3、Fireworks CS3 和 Flash CS3 是 Macromedia 公司 为 网 页 制作 人 员 研 制 的 新 一 代 网 页 设计 软 
件 , 被 称 为 网 页 制作 “三 剑客 ”"。 它 们 在 专业 网 页 制作 、 网 页 图 形 处 理 、 矢 量 动画 以 及 Web 编程 等 领域 中 占有 十 分 重 
要 的 地 位 。 

本 书 共 11 章 ,从 基础 网 络 知识 出 发 ,从 网 站 规划 开始 ,重点 介绍 了 使 用 “网 页 三 剑客 ”制作 
网 页 的 方法 。 内 容 包 括 了 网 页 设计 基础 .HTML 语言 基础 、 使 用 Dreamweaver CS3 管理 站 点 F > 


> > 


和 制作 网 页 ,使 用 Fireworks CS3 处 理 网 页 图 像 使 用 Flash CS3 制作 动画 和 动态 交互 式 网 页 ， 
以 及 网 站 制作 的 综合 应 用 。 

本 书 遵循 循序 渐进 的 原则 ,通过 实例 结合 基础 知识 讲解 的 方法 介绍 了 网 页 设计 与 制作 的 
基础 知识 和 基本 操作 技能 ,在 每 章 的 后 面 都 提供 了 配套 的 习题 。 

为 了 方便 教学 和 读者 上 机 操作 练习 ,作者 还 编写 了 《网 页 设计 与 制作 实践 教程 ) 一 书 , 作 为 
与 本 书 配套 的 实验 教材 。 另 外 ,还 有 与 本 书 配 套 的 电子 课件 , 供 教师 教学 参考 。 

本 书 可 作为 高 等 院 校本 、 专 科 网 页 设计 课程 的 教材 ,也 可 作为 高 职高 专 院 校 相关 课程 的 教 
材 或 培训 教材 。 
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